むかつくっていう人

会社で、「そういう所がむかつく」や、「それ以上言うとむかつくから話さないで」「それむかつくだけど」とか、言ってくる方がいます。男性の先輩です。 また、不機嫌そうに言うので、私も何もそのあと言えなくなってしまいます。 尚、仕事に関する事しか話してませんし、先輩にあたる方なので、丁寧語で話しています、 私が何かお気にめさない事を言ってるのかもと思うので、なるべく話さない様にはしているのですが、仕事の関係上、話さなければならない事もあり、その度に、上記のような事を言われ、精神的に参ってます。 長年仕事をしてきましたが、職場で面と向かってこのような事を言われるのは初めてなので戸惑いもあります。 これから、どのように対応していけば良いのてしょうか？ ご教示頂けると助かります。 宜しくお願い致します。 （尚、他の人には、このような事は言いません）