女性への苦手意識をなくすには

女性がとても苦手です。

男に生まれた事が元々コンプレックスでした。物心ついた時には周りは女子ばかりで、ウチは女系家族でしたし、2歳から通っていた音楽教室も男は僕一人でした。
また、中学、高校の部活も男がほぼいない部活で、ずっと自分が女性に比べて汚い物のように感じていました。

恋愛はうまく行かず、中学の時に一度彼女を作った事もありましたが、男らしさを求められるのが嫌で仕方なく、自分の中で女性と付き合うのが無理！ていう感じになりました。
高校の時には男性とそういう関係になったのですが、ゲイの方は女役に対しても男らしさ(筋肉、低い声、ヒゲ、短髪等)を求める方が多く、どうしても価値観にズレを感じてしまい続きませんでした。

それならいっそ女になればいいのではと思い、大学でヒゲを脱毛し、女性ホルモンを服用して、中性的とか、可愛いとか言われるくらいにはなりましたが性別コンプレックスが強いです。

自分はバイト先などの女性と比べて全然会話の中で配慮が出来ず、女性と会話すると差を如実に感じてしまいます。後からココはこうすれば良かったとか、やらかしてしまったとかに気づいてしんどくなります。
多分心の性別も女ではないんだろうと感じ、妬んでしまうのが正直な所です。

そういうのが伝わっているのか、女友達は数人程度です。
女性が嫌いなわけではないのですが、色々ないまぜで苦手です。会話が上手く行かないと冷や汗が止まらなくなります。
今は付き合うなら男性がいいとは思っていますが、こうも女性が苦手だと生きづらいです。

長くなりましたがアドバイスを頂けますと幸いです。