正当な非難の対象者としてその人物が位置づけられるか
いわれ無き誹謗中傷の被害者としてその人物が位置づけられるか

嫌いとかうざいという感情ではなく、感覚的なものでもなく、
なにか数値ではっきりしたものが提示できれば住民側の勝ちでしょうね。
騒音問題なら、たしか市でも騒音計は貸し出していますよ。
地域によって規制値があって、それを大幅に超えていれば問題のあるほうは明らかです。
たしか武蔵野市では騒音の苦情を議会で取り上げて、施設に注意するという決定がくだされてるかと。
それも確かゴルフ場だったような覚えがあります。似たような前例があればより強いです。