記憶力をUPしたいのですが…。

元々、私の記憶力は趣味と会話に関してはとても特化していました。趣味はともかくとして、会話を細かく記憶している（通りすがりの人の会話程度でも細かく頭に残っている感じです）のは理屈っぽい性格の私には合わず、趣味が趣味だけに毎日の情報量が多すぎてとても苦痛だったので、数年前からなるべく意識して忘れる努力をしていました。これが前提です。

幸いにも、順調に適度に会話を忘れる努力が実っていたのですが……ここ半年、職場で嫌な人たちの相手をしている内に必要以上に会話を忘れるようになってしまい、困っています。まだ仕事に支障があるほどではありませんが、今のうちにどうにかしたいと思うので、何かアドバイスがあればよろしくおねがいします。
因みに、会話以外の記憶力に変化はありません。良くも悪くもなく、平均的だと思います。