親戚との付き合いを辞めたい

アラサー転勤族新婚一年目の片田舎生まれ、3人姉自分妹の長男です。父は数年前になくなりました。父方叔父家、母方伯父家と疎遠になりたくて悩んでいます。 高校卒業まで父方実家で父方祖父母と暮らして来ました。近所に叔父夫婦が住んでいましたが、昔から叔父嫁と母、祖父と叔父嫁など、お互いに距離感やいさかいがある家族で、居心地の悪い環境でした。 また母伯父は遠方に住んでいますが、良く言えば亭主関白、悪く言えば妻妹子に対するモラハラ男で、母は母伯父ともいさかいがありました。 自分自身は大学以降遠方で転居を繰り返す生活で、親戚付き合いは年1、2回それぞれの家に挨拶しに行くくらいでした。 最近祖父がなくなり、話せば長くなりますが父叔父嫁には自分や祖父を、母伯父には父や母を中傷するようなことを葬式前後で言われて、思い返せば自分は幼少の頃から自分の親世代の親戚同士のいさかいや暗い空気感によって苦しめられてきたことを思い出すようになりました。その因果か、自分の従兄弟同士の付き合いは全くなくなり、誰がどこで何をしているかも誰かに伝え聞く程度の繋がりしかありません。従兄弟が父実家に来ることもありません。 自分たち子世代では、親世代の親戚付き合いをしているのは自分一人という状況で、腹に一物抱えてこの付き合いを続けていく意味を見いだせなくなりました。 母伯父からは親戚付き合いから逃げるな、と言われますが、モラハラを避けるために母伯父の周りにはひとがいないため、伯父だけが喜ぶ付き合いをすることが嫌になっています。 自分の新婚の妻には愛情や思いやりのない(と自分が感じてしまう)親戚とは付き合いをして欲しいとは思いません。もし両家と疎遠になったら自分の親戚との付き合いはほぼ皆無になりますが、それは許されるのか、またメリットやデメリットについてアドバイス頂けたらと思います。宜しくお願いいたします。