真剣に聞きたい時に斜めを見てしまう

自分が話す時や答える時には 目を見て話しますが 相手の話を真剣に聞きたい、 相手に質問をしたい、という際は 斜め下か斜め上を見ないと聞けません。 状況を思い出す時 計算をする時 相手の話を想像する時 例え話をしようとした時 は斜め上、 質問を考える時、質問をする時、 気を遣おうと言葉選びする時、 相手の気持ちを考えた時、 反省している時、 深刻な内容な時、 困惑している時 は斜め下です。 斜め上を見ると漫画の もくもくとした吹き出しのように 想像ができます。 斜め下を見ると 漫画でいうと集中線とかの 心の中のセリフみたいな感じで 考えがまとまりやすいです。 私は指導役や年上や上司のような 上の立場の人から 嫌われていびられやすいのですが 原因はこの癖だと思われます。 真剣に話してるのに 斜め上や下をチラチラ向くので イライラするんだと思います。 年下や同年代の人は 真剣に考えてくれているのだなと ポジティブに捉えてくれるため 仲が良いのですが 上の立場の人からは 言い訳を考えている、 真剣に話を聞く気がない、 反省を装っている、 めんどくさいから早く終わらないかなと顔に書いてある、 納得してない顔してる、 プライドが高い、 などと言われます。 たしかに年上や同年代からなら あまり気になりませんが 年下にされたら不快だろうなと 思いました。 何度か直す努力はしましたが 相手の目を見ながらだと 話が全く頭に入らず 何も考えれず トンチンカンで浅い回答しかできません。 真面目で前向きな性格の為 長い付き合いになると 「ただの癖なのね、 不貞腐れてるのかと思ってた」と 誤解が解けてはいくのですが できる限り直したいです。 斜めを向かずに聞く方法、 一緒に考えていただけたら助かります。