よその子に懐かれた時の対応

大学生の男です。 出先でよく幼児に懐かれるのが悩みです。 電車やバスの中やスーパーのレジ待ちで前後にちびっこがいたら「◯◯ちゃん◯◯なの！」とか、その子が持ってるキャラクターグッズを見せてきて「この子◯◯ちゃん」などと高確率で話しかけられます。 子供は好きなので話しかけられるのは嬉しいのですが、何かあると通報される時代なので周りの目や親から不審者に見られるのが怖いです。 話しかけられたら「お使いできて偉いね！」とか、持ってるグッズを褒めてあげてます。 子育てしてる親御さんは、この様に対応する20前後の男子学生をどう思いますか？ よく親御さんからは子供がお好きなんですねとは言われますが、本心が分からないので不安です。 子供に話しかけられても話をしない方がいいんでしょうか？ ちなみに自分からは迷子とか怪我してる場合以外は話しかけません。