なんか建設系で〇〇組ってありますよねイメージ悪くなったりしないんですか？

その程度の判断能力の人は、大きな建物の発注御客様にはならないので、仕事には全く影響はありません。

仕事にカンケー無い所でいくら変な噂がたっても、実務に影響が無ければ無視ですので。