同マンションの方へのお誘い

同マンション内に娘と同じ学年の2歳のお子さんが居ます。
まだ新築で引っ越してきたばかりで数回しかエレベータ内で会っても
「今日は寒いですね」位しか話したことはありませんでしたが、
先日偶然近くの駅のホームでばったりそのお母さんに会いました。
初めてまともにお話をしました。
そして私が「引っ越して娘も近所にお友達が居ないので機会があったら遊んでください」と
連絡先を交換しました。
それから1週間。誘っていいものか悩んでいます。
こちらから先に連絡先を聞いたのでこちらから誘うべきなんでしょうが、
その方には幼稚園に行ってるお子さんも居ます。
いつも送り出して家の事やってると何だかんだで11時頃になって買い物に行くのよ。と言ってらっしゃいました。
私も10時半くらいから家事も一段落して買い物に～って感じです。
なので、いつも今から突然誘っても迷惑されるかな…とか忙しいだろうなと考えてしまうとお誘いしそびれるんです
そこで皆さんにお聞きしたいです
相手から「機会が遊んでください」と連絡先を交換したのにちっとも連絡してこないのは失礼な人だと思ってしまいますか？