気弱?な息子

３歳になる息子の事で御相談です。一人っ子です。元気だし体も大きめで決して内向的な性格ではないと思うのですが、同年代の子と遊ぶのが苦手です。
大人や大きい子達とは遊びたがるのに、同年代の子が大勢いる公園、砂場には近寄ろうともしなくなってしまいました。オモチャを取られそうになると「ママ、ママ、」と助けを求めるばかりです。寄ってこられると手を胸の前でギュっとして体をかわして避けています
以前何人か遊び友達のような子が近所にいたのですが、不幸にも暴力的で理由もなく叩く、噛みつく、まとわりついては嫌がらせのようなことをする男の子が多く、息子はやり返せない性質なのでなんとなく疎遠になりました。今でも何人か仲よくしている子がいます。そういう子たちとは楽しそうにじゃれあったりしています。
これが全て以前に遊んだ乱暴君達のトラウマのせいだとは思いたくはないのですが、息子はこの先保育園に預ける予定です。せめて「いや」と言う、できればやり返すくらいの気概が欲しいです。このままでは保育園などでストレスの溜まった子のはけ口としてやられっ放しになってしまうのではと気が気ではありません。ご意見をお願いします。