覗かれてるのでしょうか？

マンションの上のほうの階に住んでいますが、隣接したマンションのうちより１階上のおじさんがいつもベランダの真正面から歩道を下に覗いています。
タバコを吸ってるのではありません。
隣のマンションの１階に銀行のＡＴＭが入っているので最初は駐車チェックをしてるのかと思いましたが、自転車の人が多く駐車してる人はあまりいません。
レースのカーテンを常におろしていますが、おじさんからは家のリビングが丸見えだと思います。窓越しに私と目があったり、小学生の娘に「こっちおいで」と仕草をしたこともありました。
ここ何年か続いていて、嫌なのでベランダに出ていると気付いた時はドレープカーテンを閉じています。
私は仕事に行く前の朝８時半頃スカートにアイロンをかけたりします。
着替えの途中なので下は下着姿でアイロンをかけていると、そういえば、あのおじさんいつもこの時間に見てる！と思い、窓を見るとやはり見ていました。
なので引き戸を閉めてリビングの小窓からそっと確認しますといなくなっていました。やはり覗かれてるのでしょうか？
隣のマンションで洗濯物を干す以外でベランダに出ている人はいません。
レースカーテンをもっと透けないものに買い換えようと考えています。