部活について

僕は今年高校に入り、学校にも慣れてきたんですが
部活を辞めようと考えています。
部活は自分で望んで入ったわけでなく、今までやっていたから、
父がその競技で昔僕の高校の顧問をしていたことがあることや
顧問の先生と知り合いで、周りの目が気になったこともあり
どうにかなるだろうと思い入りました。
実際に入ってみて精神的にも身体的にも辛いです。

辞めたいという意思を顧問の先生に伝えましたが
父の事もあり「お前はやめられんだろ」と言われました
父に相談してみても、なかなか認めてくれません
ドラムや写真撮影と、他にやりたいことがあるという事も伝えたのですが
「じゃあそれも途中で投げ出すのか」
「そんなことは合間の時間にもできるだろ」と言われ
一向に認めてくれそうにありません。

簡単に逃げ出すような人間になってほしくないんだろうと思いますが
これは自分でじっくりと悩んだ結果です。
何かを途中でやめるのはあまり良くない事だと感じていますし
そうならないために、これから何かを選択する時はじっくりと考えて
後悔が無いようにしようと思っています。

それでもやはり部活を途中でやめることは悪いことなんでしょうか？
また、父や顧問の先生はどうしたら納得してくれるのでしょうか？

皆さんの意見をお聞かせください。