なかなか会えない人に片思い

こんにちは。私は今同じ会社に気になる人がいます。 彼とは特に接点はなく、部署も違うので偶然がおきない限り会えません。 話したことはあるし会えば少し立ち話くらいはできる関係です。 ただ、「会う」ということが非常に難しいです。 そんなに広くない社内なのに本当に会えません・・。 突然（そこまで親しくもないし、まさか私が好意をもっているとは思ってもいないと思います。）、私から彼のところへ行って食事に誘うのはまずいと思いますか？