浮気の疑いを晴らそうとしている。
または
彼女（あなた）と愛人（その女性）を並べて優越感や興奮を感じるため。
二股なら会社で日常的にそう思ってるでしょうけど。
または
その女性が彼女で、その彼女が愛人であるあなたとの浮気を疑っているので晴らそうとしている。

もしも二股で、同じ職場で内緒なら
飲み会に３人が居ても、彼は誰とも付き合ってない振る舞いを堂々とできて、あなたと女性の二股も成立して、他の人にも疑われません。
二次会や三次会は「男だけで行くから」
そうなれば解散後に彼はどちらとも待ち合わせしない言い訳ができます。

やましいことが無いから誘ってるだけならいいですね。

彼は何も考えていないんでしょ。
誰が来ていようが単なる飲み会なんだから、来てみればそれが分かるよって事。
いや、「いちいち鬱陶しいな」ってあなたの事は考えてるかもね。
彼は飲み会には行きたい。
飲みに行きたい気持ち＞あなたへの気遣い
自分の望みが先なんだよ。
行きたい飲み会を断ってまであなたを安心させたり、大事にするつもりはないって事。
そうでないなら、彼は相当なタヌキで、あなたとその女性の両方をヤキモキさせて楽しんでいるのかもね。

何があって浮気疑惑なのかわからないけど、
周りはあなたたちが付き合っているのを知らないのだから、忖度のしようがないよね。
浮気疑惑のあるその女性の方が、あなたの事を「彼の浮気相手」「彼にちょっかいを出してる女」って見てるかもよ。

「実際に会えば浮気するような相手じゃないって分かるだろ」
こんな感じですよ。マジで。

思考回路が尋常ではないのです。
付き合う男性はもっと選んだ方が良いと思います。

＞どう言う心理で
そう言うことを言ってくるのか
わかる方教えてください。

こういうトピ多いですよね。
で、決まって相手はろくでもないヤツなんですよね。
そんなダメダメな奴の心理がわかりたい？
わかってどうすんの？　っていつも思います。
心理が分かったとして、対策のしようってある？
大事なのは自分の気持ちじゃないの？
自分が嫌だと思うことされるような彼、いりますか？

私はトピのような質問をする人の心理がわかりません。
わかりたくもない。

まずね、あなたは彼の浮気を疑っている。
その浮気が本当か違うかで、赤の他人が彼が何を考えてあなたを飲み会に誘うかの想像が変わりますよね。
彼が浮気してないなら、身の潔白を証明する手段としてあなたを誘っている。
彼が浮気をしているなら、あなたが「飲み会に私を誘うということは身の潔白を証明しようとしているんだから、浮気はしてないんだ」と安心するのを狙って誘っている。

あなたが「浮気の疑惑」と言っている時点で浮気が事実か否かも分からないのに、何故浮気しているかどうか分からない彼の心理を他人に考えてほしいの？
そもそも、何故彼が浮気しているとあなたは思ってるの？

彼が浮気していると思って精神状態がよくないなら別れればいいのに。
同じ職場に浮気相手がいるかも、と思いながら彼と同じ職場で働いて彼と付き合っているって全然楽しくないですよね。
他人に彼の心理を考えてもらう前に、他人に考えてもらってまで彼と付き合うあなた自身の心理を考えてみたら？

他の方も回答してますが、浮気が事実かどうかに関わらず彼はろくでなしだと思います。参加した所でトピ主さんの気持ちはスッキリするのでしょうか。
恐らく彼と同じようなタイプの男性が元同僚にいましたよ。奥さんがいるのに色んな浮気相手を自分の友達に紹介してました。その友達は奥さんとも知り合いですよ。奥さんは同席してないですがろくでなし具合は同等かと。
過去に浮気疑惑で何度も喧嘩になっている人と相対して心境の変化などあるのでしょうか。凄く根暗だとか頭が悪そうだとか例えばそういう事が分かれば浮気はしてないだなんて思えるようになるでしょうか。
お別れした方がいいですよ。そんなひと。