社交辞令だと思います。

本当に気がある誘い方であれば、「来週辺り」といった期限を絞った誘い方になると思います。
親愛の情があることをさりげなく伝える方法として、この程度の表現は一般的だと思います。
（「そのうち遊びに行こう」という方がまずいですし…）

それが口先だけなのか、本当に誘っていて実際に飲みに行くことがあるのかは、彼のみぞ知るだと思います。

ただ、貴女の前でも誘っているなら、口先だけにせよ、実際に行動を伴うにせよ、比較的「軽いこと」と考えているようですね。

言われた方の女性も、「また○さん、口先ばっかり」と笑って聞流す人もいれば、「本気で誘っているのだろうか？どう答えればいいのだろう？あなたと行きたくないと本気で答えるのも大人気ないか、しかし、社交辞令のつもりで、誘ってくださいね、などと言って本気にされても困るし」と困る人もいるのではと思います。

まずは、言われる女性の心理として、言われて困る場合もあるので、あまりそういうことは言わないようにすれば？と言ってみれば？

「あなたがそう言った時、女性はどう返事してる？」と聞いてみてもよいかも。

「今度飲みに行こうよ」なんて、彼女がいる男性や既婚の男性に言われたら、その人の神経を疑いますよ。彼の場合も、学生時代からの友人とかいうならともかく、仕事の件で電話してきた女性に対して言うなんて信じられないです。

あなたも彼にもっと強く言っても良いんじゃないですか？「社交辞令は男性に対してのみにして欲しい」とお願いしましょう。

彼女がいたらそんなこと社交辞令でも言わないのが普通だと思いますけどね・・。

社交辞令である場合と社交辞令ではない場合があるとは思いますが、

会社の女の子と飲みに行ってはいけないんでしょうか？

会社の仲間ですから、飲みに行くってことは普通にあると思うのですが？男女関わらず。

あんまり詰問口調でいくと、本当のこと言ってくれなくなりますよ。

どちらかはわかりませんが、あなたの前で誘ってるってことは、よほど裏をかく狡猾なタイプでなければ、２人で行きたいというデートの誘いではなくて、”相手の女性とまたそのあたりの仲間何人かで”って言う意味が省略されているような気がします。だから堂々と会話を聞かせてくれてるのかも。
惚れっぽかったり馴れ馴れしい人でなければ、一般的には、職場の結束を固めようっていうノリのタイプでしょうか？
また、職場の向上のためじゃなくても、どんなに他の女性と交流していても、モラルは外さない、という男性の知り合いもいましたし。
でも、電話だと、相手の女性だって、誰も見ていないところでこっそり誘われたみたいとか、私浮気相手にされてる？って、思ったとしても無理も無いと思うし、不快に思ったり話しにくくなったりしたらかわいそうですね。
私なら、みんなで飲みに行くのが前提なのか、２人でも行動するのか、聞いてみるかしら？

誰かれかまわず「飲みにいこう！」っていうタイプは八方美人だと思います。特に異性によくういタイプのヒトは、心の底では「異性に好かれたい」って願望が強いと思います。異性にそれほど興味のないOR彼女を心底愛してる男性は、あまりそういうこといわないし、聞いたことないです。

私も含め、私の同僚達は、恋人がいても会社の異性と飲みに行きましたよ。
ただし、『二人きり』ということは無いです。数人のグループで。

トピ主さんの彼氏さんの場合は、社交辞令と言うよりも、その電話を切るきっかけ…と言うか、締めの言葉として言ってるんじゃ無いでしょうか？
「今度飲みに行こうね」＝「話は終わったので電話切るよ」
という感じで。

だからあんまり気にしない方がいいです。
でも

＞会わない日があると、他の女の子と飲みに行っているんじゃないかと心配で心配で・・・。

と、どうしても心配してしまうようなら、彼氏さんにあらかじめ『会社の人と飲みに行く日は教えておいてほしい(もちろん、男性と行く場合でも)。連絡が付かなくて不安になるのがイヤだから』とお願いしておくのはどうでしょう？？？
この場合、女性と飲みに行ってるとしても、トピ主さんにあらかじめ言ってるわけだから、やましい気持ちは無いということになる…と思いますが…どうでしょう？

相手が男女問わず、社交辞令で言います。

たとえ、大嫌いな同僚であっても、
「じゃ、そのうち飲みに行きましょうー」で、
話を終了させる事が多いです。挨拶代わりですね。

そういう人、多いですよ。逆に言われた場合は
「いいですね！行きましょう！」
と返事しておきます。

本当に仲が良いのでなければ、
実現する事の方が少ないですよ。
まして、二人きりでということはありません。

彼氏さんが軟派かなのかどうかは普段の雰囲気に
よると思いますが、今度「一緒に」って言い方だと
軟派な気もしますね・・・