最小限の会話する職場望んでいます

今の職場は総務職なのに、仕事中にも関わらず、私語を平気でしています。何かの契機で雑談になり受け付けない感情になってしまいます。「他人のことは関係ないだろう」「仕事に関係ない話するな」と気持ちになります。 聞こえない・無関心の気持ちで私情を抑えていますが、雑談が盛り上がり声が高々なると耐え切れなく、職場を出て別の仕事をします。ストレスが酷く緊張型頭痛を治療中です（２回目） 朝晩の挨拶と仕事上必要な会話をする職場を望んでいます。 私が我儘なのでしょうか？ 自己管理が出来ていないから病気になるのかと自己嫌悪に陥っています。もっと厳しい気持ちが必要ですね・・・