同僚からキレられました。どうすれば。。

先日、仕事のことで同僚に確認を取ることを忘れてしまってたのを、 仕事が終わって、私服に着替えて、退社した後に気づき、同僚に確認をしました。1回目は大丈夫と言ってくれて安心してたのですが、ふとこっちの方は大丈夫かと不安になり、2回目に聞きに行ったら、キレられました。 忙しいのに、聞いてしまって本当に申し訳ない気持ちです。その後まだ会ってないので、会ったら謝ろうと思ってますが。。 ただ、最近、仕事が終わって、退社した後とか、急に、突然に「あれやったっけ」と出てくるので、その度に不安になることが増えました。 確認して仕事終わった時は、全く出てこないのに。 どうしたら、こういうことがなくなるのでしょうか。時間内に仕事を終わらないといけないので、作業中メモをする時間もないし。 ぜひ何かアドバイス頂けたらありがたいです。