知らないうちに不倫相手にされてました

この場合私は悪いのでしょうか？ 20歳の女です。 付き合ってはいないのですが、半年程関係を持ち続けた男性がいます。その方は私より10歳年上 です。 最初は年齢も年齢なので、結婚や彼女の有無を疑いましたが特定の彼女は居ない、体の関係があるのも私だけと言っていました。 彼の友人や職場の方も含めた飲み会もよく開催していて、友人や職場の人達も私たちの関係を知っていました。 付き合いたい私に対し煮えきらない彼に辛くなり、私から先日、「もう今日で会うのを最後にしよう」と言い、彼も「すぐには君の気持ちに答えてあげれないしそうしよう」と言われ関係を終わらせました。 その時は綺麗にお別れできたと思ったのですがその数日後、 彼のことを知る方と話す機会があり妻子持ちであることが分かりました。そしてなんと私との関係が始まったと同時期頃から一戸建てに住み始めて事も。 なかなか家には入れてくれようとせず、家の場所も知らなかったので不信感は抱いてましたが、「あまり人を入れたくないだけなんだ」という彼の言葉を鵜呑みにしていた私にも非はあると思いますが、、、 妻子持ちな事を知った後、よく飲み会をしていた彼の会社の人に彼が妻子持ちか尋ねたところ「居ないんじゃないの？あの人は俺たちにもプライベート明かさないから」と言われました。知らないわけないですよね、彼の友人も職場の人もグルだったのかと思うとタチが悪いな、と思いました。 当の本人の彼に妻子持ちのことをラインで問い詰めたら、「なんのこと？送る相手間違えてない？」とシラを切られました。 もし何かあって彼の奥さんにバレてしまったら知らなかったとはいえ、慰謝料請求などはされるのでしょうか。 見抜けなかった私も悪いですが、奥さんと子供に申し訳ない気持ちでいっぱいです。 どうすれば良いのでしょうか。