上司からの贈り物を断わりたい

数年前に上司から食べ物を頂きます。 一口食べて確かに美味しかったので、喜んでいただきました。 しかし、今度は個人的にこっそり大量に持ってきてくださるようになったのですが、じぶん一人では食べきれない量ですし、職場のスタッフみんなでいただいてもいいか？確認をとると、あなただけにあげている物だから一人で食べてくださいと、キレ気味になります。 最初はありがたくいただいていたのですが、大量なのと、日持ちがしない物ですし、健康上の問題から遠慮したいのが本音です。それに、いただいた物ですから、本来であれば、誰に差し上げても良いはずとも思いますが、職場のみんなとは食べないでと強調されたり、キレ気味になるのも気持ちが悪いです。 また、持ってくるというので、気持ちだけでありがたいけど、量も自分には多いですし、遠慮したいと申しましたが、伝わっているのか分かりません。 黙ってもらってすててしまっても、とも思いますが食べ物を粗末にはしたくないのです。 それにお金を払って買っている物。 なぜか、頂いたら素直によろこべば、いいのでしょうが、憂鬱です。 どうしたら気を損じないように、断れますか?