優先すべきは世間体？やりたいこと？

私は現在公務員になり一年が経ちます。今の仕事に就く前は6年間水商売をしていました。水商売は楽しいし色々考えるのもあまり苦にならなかったのですが、世間体が悪すぎてアパートを借りることすら困難な上、家族や恋人にも嫌な顔をされて辛くなって転職しました。
今の仕事は全く興味なくてつまらないけれど生活のためだと思って我慢して働いてます。家族や恋人は転職した途端、応援したり心配かけてくれるようになりました。
友人や知り合いと仕事の話をすると「水商売の方が向いてるよ、仕事の話するとき楽しそうだったし、リピーターになるお客さんの気持ちも分かるよ」と数人に言われました。正直自分でもそう思います。
人生悔いのないようにやりたいことをやるべきでしょうか？それともそんなの綺麗事で、世間体のために公務員の方が良いのでしょうか？

ちなみに今の職場は公務員ですが特殊なところがあり、女性は9割以上寿退社しているということです。結婚するなら辞めなくてはならないと思っています。そうでないなら結婚は難しいと考えています。