夫の趣味？はたまた浮気？どうすれば？

トピを開けて頂いてありがとうございます。
私は51歳　夫は53歳　子供は19歳を頭に3人います。

夫は7～8年前からあるスポーツをは本格的に始め
現在は自分が実質代表のアマチーム（男女合わせて12名程度）を立ち上げています。

それはいいのですが、あまりにも最近は競技やチーム運営に
のめりこみすぎて　困っています。　
始めたころは、もちろんサポートは私しかいなく、レースにでてもぽつんとしていました。
私はそれを出来る限り応援し、こまかいことも手伝ってきました。
時には私も競技に参加したりしてました。

それなのにここ2年くらい前から、メンバーに女性が入るようになってから態度がおかしくなってきました。
私がメンバーの女性について尋ねると
「チームのことに一切口出しするな」
「おまえは嫉妬深くて、すぐいやらしく考える。自分の取り組んでいることは純粋なスポーツだ」と
最近はチームのHPまで恐い顔で「見るな」と言っています。

遠出の練習のときはチーム員の女性優先で車に同乗させ、補給と称して食事も行きます。
これらは本人が伝えてくるわけではなく、後でHPなどでわかる場合もあります。
でも女性がらみのときは個別に携帯メールを使っているようです。

今まで私が手伝って応援してきたことって、何なんでしょう？
今日も数日後のレースへの応援カーも、私の座席がないような、
私が乗らなければ誰か乗せれるのに、とか言うのです。
悲しくなってきました。

本人は怒って否定しますが、見る人がみれば、浮気、不倫と紙一重だと思います。
私はフェードアウトした方が良いのでしょか？

この件以外のいさかいもあり、夫は私と離婚したくてたまらないようです。
この夫にここまで執着する自分も、情けなく、つらいです。