有給拒否は可能？

会社をケガをして２ヶ月休みました。
(労災ではありません)
最初１ヶ月の時に傷病手当てにするか有給を使うか話をした時に有給で処理をお願いし、了承を得ました。続いて２ヶ月目も有給がまだ余っているのでもう一度有給処理することを伝えて、わざわざ書類の書き方まで下書きしてもらい教わって書いて提出しました。
ところが次の日突然呼び出され「２ヶ月も有給処理されたのでは他の職員の手前あなたの印象が悪くなる。
また、他の職員も長期休んだ人がいたがその人も全部は有給は使わず欠勤にした。
あなたの場合はさいわい傷病手当てがでるのだからそちらに切り替えて１ヶ月分の有給は使わず欠勤にしてほしい。」
そういわれ気分が下がりっぱなしです。
これからもこの会社に勤務するので反対もできず、ですがそれならば最初から傷病手当てにしてくれとはっきり言ってもらえていたならばこんな後味悪い思いをしなくてすみました。今月の給料をあてにしていたのもあり生活の予定もメチャメチャです。
どうして私が有給処理したか欠勤したかが他の職員が知るのか？たんに会社の都合なだけではないのか？等考えていたら悔しくなりました。
続きます。