つい見てしまう

30代独身の男です。 職場での悩みです。 綺麗な女性、可愛い女性 私は思わず、見てしまう、、みたいなのですが、、 最近、ある人を思わず見てしまっているためか、嫌がられている気がします。恐らく、視線を感じとっています。 自分の視界に入るとどうしても気になってしまいます。 相手はとても不快に感じてるかもしれません。 正直、少し好意があります。 しかし、相手が不快に感じるなら、申し訳無く思うし、迷惑にならないようにしたいと思っています。 普段から話したりするような親しい仲では無く、仕事で必要なことがあれば、話す程度です。プライベートなことはほとんど知らず、連絡先さえ知りません。 もちろん、遊びに誘ったとか、昼飯誘ったとか、そういったことは一切ありません。 以前に別の職場で似たようなことがあり、、 この場合は普通に喋る感じであったせいか、 好意があるであろうとか 散々、周りから、、 冷やかしやら、嫌がらせのようなことも言われ 簡単に言うと、イジメられ長く勤めた会社を辞めました。 また周りからイジメを受けたりしたくない、、 相手にも悪いと思います。 同じことを繰り返したくない、、 どうすれば良いでしょうか？ どう行動すれば良いでしょうか？ アドバイスいただけませんでしょうか？