飲みの約束について

こんにちは。 主婦歴３年の３１歳です。 去年１０年間働いていた会社を退職し、今は専業主婦です。 その会社にいた男の人（既婚者）と、在職中もたまに御飯に行ったりしており、退職してからも１度御飯に行き、また行こうねとお誘いをしてもらっています。 が、いつも日程を決めるんですが、直前（１週間くらい前）になると、出張が入ったとか、接待が入ったとかでキャンセルされてしまいます。。 キャンセル後、御飯に行けそうな日をまた教えてね、と電話やメールをもらうのですが、日程が決まると上のように直前にキャンセルされてしまいます。 本当に出張？接待？と疑念ももってしまってます。。 彼は、仕事もできる人で、忙しく、異性にもてる人です。 彼の予定に合わせればいいのはわかってるのですが、 私はやっぱり彼の中で順位が低いんでしょうか？？ 私自身、やっぱりたまには夫以外の人と御飯に行ったりして、気分転換したいのですが、男友達も他にいないので、大切に続けていきたい存在です。やはり、彼に合わせるのが一番いいのでしょうか？