小2娘の友達が苦手で

小2娘の友達の件です。家が近所で、1年の時にすごく仲良くなりました。 よく家へ遊びに来たりしていたのですが、外で会った時に挨拶したら「何？！」と不機嫌そうに言われたり、娘への言い方がキツかったり、度々違和感を感じるようになりました。 うちに4歳の息子もいるのですが。家に来た時に邪険にされてしまいまして、隣で見てるだけで「入ってこないでよ！」と言ってるところをみたので、その時にここは息子の家でもあるから、一緒に遊びたがる時もあるし、すごく迷惑な事をした時は注意するけど、そうじゃなければ一緒に遊んでほしい。それが嫌なら、家で遊ぶのはなしにしてほしいと話しました。 そしたら、その時は「わかってる！けど、今途中まで遊んでるの邪魔されたから、それが嫌だったの！」と返事があって、ん？と思いましたがそれに関しては謝りました。けど、まだ小さいし聞き分けも難しいからそれが嫌だったら外で遊んでね、と話しました。 その後もうちには来続けて、今度は息子が来ると娘にヒソヒソ「あっち行ってって言ってよ」等言うようになりました。(至近距離なので私にも聞こえています) 娘が「それは言えない。自分で言ったら？」と返すのですが、私の顔をチラチラ伺うのみで、はっきり言う事はありません。それだけじゃなく、学校で娘に「あの時◯◯(息子)くんにあれされたの、すごく嫌だった」と何回も言われるようです。　 娘からそんな話を聞くたび、もう、それならうちに遊びに来るのはやめて外で遊ぼう、て伝えてくれる？と言っていましたが、毎回、次いつ遊べる？と聞かれるようです。 娘も最近は嫌になって来たようで、遊びを断るようになりました。 これでよかったのかな…と思っていますが、自分の態度も大人気なかったかな、と思っていて、どうすればよかったかなと答えが出ず。みなさんならどうしましたか？