息子の初近所友達への不安・・

５歳の息子にはじめて保育園以外の友達ができました。
お向かいのマンションに住むＡ君（小１）とＢ君（小５）兄弟です。

２人は５歳の息子とサッカーをしてくれます。
下に２歳の妹もいるのですが、とても可愛がってくれます。

うちは一戸建てなので、うちに人が居るかどうかは外からすぐに分かります。
息子が保育園から帰ってくると、すぐに息子と娘を呼びに来て、表でサッカーをします。
娘もゆっくりなボールを蹴ってもらえてとても嬉しそうです。

そんな日が１ヵ月続き、いつものように、６時半になったので「ご飯よ～！」と言いながら玄関から外を見ると、男の子友達５－６人が、マンションのゴミ置き場にしゃがみ込んでＤＳをしていたのです。
その中に、うちの息子と娘もいました。

最近は外で遊ぶのが暑いせいか、私が仕事を終えて車で帰宅するのを見ると、すぐにうちに来て、私より先にうちに入るのです。
そしてする遊びはＤＳかサッカー。
どちらもして欲しくはありません。
でも息子と娘が大喜びするし、基本的には挨拶もできるし、私にもよく話しかけてくれる可愛い子たちなので、追い出すことはしていませんでした。

でも今日！！
息子が不在で娘と私２人で帰宅したら、またＡ君とＢ君がうちに「おじゃましまーす」と入ってきて、「充電器はどこにさしたらいいですか？」ってＤＳを始めたので、
　・我が家ではＤＳはしてほしくない
　・息子はしばらく帰ってこない。２歳の娘には今からテレビを見せて、
　　その間に私は食事の準備をしたい
と伝えました。
Ａ君は「帰ろう・・」とＢ君に促したのですが、Ｂ君は無視して１人でＤＳをしていました。
Ａ君は気まずそうに娘の横に座ってテレビを見ていました。

息子は２年後にはＡ君と同じ小学校に通います。
母親として、どうすればいいでしょうか。