「うちの息子を刺激しないで」と隣から言われてました

実家の近くにマンションを購入したので、よく実家に行きます。
私のほかに親しくしている従姉妹たちもいるので彼女たちもよく遊びに
きます。実家は戸建てで大きな家なので母の友達や私や従姉妹たちが
頻繁に泊まったりします。家庭菜園の野菜をもらったり、お礼に家の
掃除をしたりして過ごします。別荘のような感じになっているでしょうか。

実家のお隣は６０代の夫婦に息子さんたちが数人住んでいます。
そのうちのひとりの息子さんがかなり神経質なタイプのようで
年齢はまだ３０歳にはいっていないのですが、部屋にこもっています。
私はいつも動きやすいジーンズにスニーカーというラフな格好で
実家に行きますが、従姉妹たちはたまにおしゃれをして訪問してくるそうです。おしゃれといっても露出ファッションではなく女性らしいワンピースや
ロングスカートといった上品なファッションです。
騒音も出さないし外で話し込んだりもせず静かにしているのに
隣の家の主婦から「うちの息子の目に入るところに姿を出さないでほしい」
といわれたそうです。いつも２階の窓からうちの実家の様子を覗いているのは知っていましたが、刺激するなという言葉にびっくりしました。
刺激するもなにも、普通に女性が家の敷地内を歩いているだけで
カンに触るのでしょうか。その家の奥さんは、若い女性が嫌いなのかも
しれませんが、実家に女性の泊り客があるたびに、そのとまっている
部屋の窓を屋上から覗き込むように見ているそうです。
気持ち悪いのはこっちのほうなのですが、こういう家は無視したほうが
いいでしょうか。
お客さんがまったくこない家のようでその息子が
たまに音楽を害音量でかけたり絶叫したりする声は響くそうです。