彼氏と家族の問題について

真剣に悩んでいます。

私には今１年半お付き合いをしている彼氏がいます。
彼とは元々幼馴染なのもあり、彼氏彼女という関係になってもすごく仲がいいです。
しかし問題があります。家族のことです。

少し複雑なのですが・・
まず、私の兄と彼のいとこが小学校～高校までの同級生なのですが、いわゆる犬猿の仲です。
それだけならまだしも、彼のいとこのお父さんが私の父の部下になってしまったのです。（元々違う会社だったのですが、父の会社に移ってきました）
そして、そのいとこのお父さんはとても勤務態度が悪く（毎回二日酔いで仕事に来るなど）会社での評判も悪いらしいです。

また、父が病気になってしまい余命を宣告されました。
父が倒れた時、一緒にいたのはそのお父さんなのですが、父が救急車で運ばれたあと一人で飲みに行き、結局お見舞いにも来ず、メールも電話もいっさいありませんでした。

そんなこんながあり、私の母は彼との結婚を猛反対しています。
絶対に賛成はする雰囲気ではありません。

私と彼が付き合っていることを母しか知らないというのもありますが、兄と父に言えば同じように反対すると思います。
彼とそのいとこが異常に家族で仲が良いので、尚更母は私と彼が結婚して家族になって関わるのは無理だといいます。

母の気持ちはすごくわかります。
彼のことは好きですが、現状を考えると本当に結婚は無理だと思います。
彼には、彼のいとこのことなので相談できません。

私はいったいどうすればいいでしょうか。