会社の既婚男（年下）が手を触ってきて気持ち悪いんです！

誰に相談していいかわからず、こちらに投稿させていただきました。 30代前半女性です。 タイトルの通り、会社の既婚男が手を触ってきて気持ち悪いんです！ 最近子供も産まれ、奥さんに相手にしてもらえず寂しいのでしょうか？？ その頃から増えたような気がします。 たとえば指に絆創膏をしていたら、 「あれ？手どうしたの？」 と言って指に触れてくる。 ということが多いです。 普通にみんながいる場所だから下心とかそいういう意味じゃないんだろうとは思いますが、どうにも気持ち悪いんです。 でも悪気が無いのに注意したらこっちが自意識過剰みたいに見られそうで悔しくて上司等に相談できずにいます。 （「セクハラはやめなさい！」というようなことは言いましたがあんまり気にしてない様子・・・。） 職場は離れているので普段は会いませんが、また新年会や歓送迎会などお酒の席で会うことがあるので、ホンキで気持ち悪いのでやめてほしいと本人に言うべきでしょうか。