職場の方からのアプローチに困ってます

４月に転職しました、３２歳の独身女の雨降りです。

先月、他の部署と合同で新卒・転職組みの歓迎会を開いて頂き、私はお酌をしながら挨拶に回りました。
その時、男性Ａさん（４７歳）と知り合いました。
Ａさんは明るい方で、色んな方とお話していました。
私にも何度か話し掛けてくれたのですが、どうも一方的に話されるというか、話題を振ってくれるのですが、それに対して私が答えると遮って自分の話に摩り替えるというか、私の話を流して聞かれる。と私は感じました。

歓迎会以来、Ａさんから食事や呑みによく誘われるようになったのですが、私はいきなり一対一は苦手なので『皆さんにも都合を聞いてみますね』と言うと『じゃあいいや～』と言って終わりになっていました。

そんな感じでお断りが続いていたのですが、今月の初め、就業後に同僚達と一緒に駅に向かって歩いていたら、Ａさんから呼び止められ『結婚を前提にお付き合いしてほしい』と言われビックリしました。

手を握られそうになり、とっさに避けて『ごめんなさい無理です！！』と断りました。
するとＡさんに『こんな人前で恥をかかせて…』と凄まれ、そのまま追い越して行ってしまいました。

その後、同僚達から『Ａさんは明るくていい人だとは思うんだけど、お付き合いとかは止めた方がいいと思うよ』と言われました。私もそう思います。

そんな事があってもＡさんは今まで通り食事や呑み、さらには週末ドライブなどに誘ってきます。
その都度『個人的なお付き合いは出来ません』とお断りしていますが、納得してくれません。
というより聞いていないという感じです。

最近、恐怖を感じるようになりました。
上司に相談したいのですが、危害を加えるとかはないので『誘われても断ればいい』で終わりそうです。

今後私はどのように行動・態度でいたらいいでしょうか。