奨学金と住宅ローンの返済について

私は50代半ばの会社員です。
夫が勧めるので、10年ほど前に、夫の実家の近くの家を購入しました。私の方が年収があり、ローンを私1人で組みました。
現在、住宅ローンが2400万ほどあり、まだ20年かかって返す計画になっています。
ちなみに私の年収は700万ほどで夫は自営で200～300万ほど。

夫は、持病があるので、あまり働けません。
でも、私は、家族でおサイフは１つと思ってます。自分の方が年収があっても、家族全体では節約しないといけないので、毎日お弁当作っていったりしています。

最近、夫に臨時収入があったようで、それで、子どもの奨学金を全額返すんだと言い始めました。
私は、そんな臨時収入があったのなら、住宅ローンの繰り上げ返済に協力してほしいと、言い合いしています。

子どもは、来月から奨学金の返済が始まります。有利子の奨学金で、400万近くあります。

夫は、子どもの借金はなくしてあげないと、親なんだから、とのこと。
それはわかるのですが、私は家族の中の借金の中で、高金利のものから、早く返して行きたいと思うのです。

私が死ねば住宅ローンはなくなりますが、将来心配です。
住宅ローンのうち金利が3.27%のものが1200万ほどありますが、奨学金の金利は0.1%とかです。同じ金額を返済するのに、金利の高い方と低い方で100万ほど軽く差が出るので、もったいないなと思ってしまいます。
5年後に退職金が出るので、それで一部は返済して、いざとなったら、今の自宅を売ってもいいかもしれません。土地代で３０００万くらいはあるはずと思います。

息子の奨学金は、毎月2万弱の返済で20年ほどの計画です。一流企業に就職したから自分で払えるから大丈夫、いらないよと言ってくれますが。

夫はがんこなので、私の言うことはなかなか聞いてくれません。いい方法があれば教えてください。