父との関係について

60代後半の父。母は私が高校の時に倒れ、今は寝たきりで施設にいます。 昔から、父はモラハラ、異常な束縛、気に入らないと家でも外でも怒鳴り散らす（あぁ？ふざけんなよてめー！等、口調もひどい）、自分がいかに偉いか長々語る、気に入らない車は煽って当然（今でも）。家族はいつもビクビクして生活していました。 母が倒れてからは、私は所謂ヤングケアラーになり、学校に通いつつ介護と家事をしました。25歳の時、母が施設に入る事になり、無理やり家を出ました。 子供が生まれてからは度々実家に顔を出し、母の面会に行き、付かず離れずで何とかやってきたのですが、最近父の息子に対する当たりが強くなりました。 お小遣いをくれたり優しい面もある一方、息子のやる事全てが気に入らない様子で、うるさい！邪魔だ！等、声を荒らげるようになりました。一方、娘は猫可愛がりで。（小学校低学年の姉弟です） 息子本人は気にしている様子がなかったので、しばらく何も言わずにいましたが、先日エレベーターを降りる際に開くボタンを押そうとした息子に、余計なことするな！と頭をはたきました。何するの！と言ったら、そんな強くやってねーだろ、と。外だったのでその場は何も言わず、後からLINEで、今まで我慢してきたが、息子への当たりが強くもう黙っていられないと伝えました。 父からは、姉がいる弟ってのは甘やかされて精神的に弱くなる。だから言ってんだ。と来て、うるさい！邪魔だ！と言われた子が精神的に強くなるとは思えません。と返したら、お前は家族を捨てて家を出た！（母が施設に入ったから出たのに）全部俺が苦労してやってきたんだ。お前が家出た時点で、子供は居なくなったと思ってるんだ。我慢してるのが自分だけだと思うなよ！そんなに俺が憎いなら絶縁してもらって結構！ときました。 もううんざりです。絶縁でもいいのですが、母のこともあり… 客観的に見てどう思いますか？