お正月の義実家への帰省、日帰りは不自然でしょうか？

結婚５年目子どもなし主婦です。 義理の実家は車で４時間、私の実家は８時間の距離です。お金のことを考え、一度に帰省します。私の実家は正月、お盆とそれ以外にも帰ることがあり、３～５泊するのですが、義理の実家へはお盆と正月の年２、３回しか帰っていなく、日帰りか１、２泊しかしたことがありません。 たくさん帰らないと義母と親しくなれないのに、気の弱い私はいまだに義母と会話も弾まず、できれば長居したくないというのが本音です。ただどうしても嫁という立場と私の実家にばかり帰っているというのが気になって(この考えも良くないですよね)、日帰りでも帰りたいと思ってしまいます。 ただ車で４時間もかかるのに泊まらないのは不自然でしょうか？あまり帰らない夫と義父母も飲みたいだろうし、遅い時間にわざわざ帰るなんて。今まで「泊まればいいのに」と言われながらも夜中走った方が安いからと理由をつけて帰ってきたことはありますが、なんとなく気まずくて。 実は先月私の実家に用があり、帰りに義理の実家に日帰りで寄ったので夫は正月は行かなくてよいと言ってくれています。それなのに行かないと気になるんです。私の考えはやはり無理がありますか？