夫の不倫相手からの嫌がらせ

夫とは結婚20年。その間2回不倫されました。
2度目の不倫は7年前に終わっているのですが
相手の女性からの嫌がらせが続いています。
私の職場に電話をかけてきたり、ファックスを送ってきたり。
内容は、私への誹謗中傷。
私がいかにひどい妻であるか、夫が不倫するのも当然、といった内容。
内容は殆どでたらめです。
ですが、私の職場での立場はどんどん悪くなってきています。

警察にも弁護士にも相談しました。相手のご主人にもお話しました。
被害届も出しました。しかし、立件するには証拠不足だそうです。
夫も私も直接相手と話もしましたが、効果なしです。

夫は不倫後は、携帯も所持せず、家族のために尽くしてくれています。
しかし、最近ではどんどん愛情が冷めていって
夫と離婚すればこんな嫌がらせからも解放されるのでは、と思ってしまいます。

今の夫は100点満点ですが、不倫は繰り返すともいうし
（実際繰り返されている）何だか疲れてきました。
不倫発覚後は、そんな夫でも好きで好きで仕方なかったので
何とか再構築にこぎつけましたが、
長引く嫌がらせに心身ともに疲れ果てました。

何とか嫌がらせを終わらせてから、離婚についてしっかり考えたいのですが。