職場でキレてしまいました。

30代男性です。製造メーカー（中小企業）に勤務しています。はんだ付け等、机の上で細かい作業を行うことが多く、集中力が必要となります。作業場所は案件によって転々とするため、固定の作業場所というのがありません。

とある先輩社員と年上のパートの業務中の私語がとにかく長く、以前から気になっていましたが、偶然にも同じフロア内での作業となってしまいました。そのため、気が散る場面が何度もありました。それに私が不慣れで難しい作業をしていたこともあり、苛立ちがありました。最終的に部品を壊してしまい、その苛立ちと周りの私語の煩さから机を殴って一時退室しました。

再び作業場所に戻ると、私語をしていた先輩社員から「さっきの態度はなんだ」と詰め寄られたので「私語がうるさくて集中できませんでした」とはっきり言い返しました。「休憩中だった」と言ってましたが30分近く作業せずに話をしてましたので、サボっていたのと同じだと私は思っています。
人事と上司にもすぐに報告と謝罪をしました。人事としては「悪いのは相手だから気にするな」「怒らずに人事に報告してほしかった」とのことでした。

怒って物に当たらないように気をつけていましたが、結局は我慢できず爆発してしまいました。この出来事から本当になんとかしないと…と真剣に考えています。
職場では怒らないように…と意識してきましたが、結局こんな感じなので改善できるか不安です。何かいい方法はありますでしょうか？

それに来週から作業場所が変更されそうですが、気まずさや周囲の視線が気になります。今までどおり過ごすしかありませんが、少しでも気まずくならないようにするには何をした方がいいのでしょうか？