退職された職場の方（Aさんとします）を、お茶に誘ってもいいか迷っています。

Aさんと私はほぼ同年代で双方女性です。
仕事はまったく別で、社員の飲み会で会えば話す程度の間柄でした。
Aさんが退職される際、生活圏が近いことがわかり、せっかくなので仲良くなれたらいいなと思って、思い切って連絡先を聞きました。

でも向こうは社交辞令のつもりかも、迷惑かも、会っても話が弾まなくて気まずい思いをさせるかも、と悪いことばかり考えて一ヶ月ほど経ってしまいました。
自分でもウジウジとみっともないのですが、私はもともとひどい人見知りで、友達を作るのが苦手で・・・。
それを打破したくて、無理やりテンション上げて連絡先を聞いたというのもあります。

いきなり夕飯や飲みはハードルが高いので、とりあえずランチかお茶を考えていますが、やっぱり誘ったら迷惑でしょうか。

何か判断材料に必要なことがあれば追記しますので指摘してください。
よろしくお願いします。