職場の人が噂好きで困っています。

初めまして。20代後半の者です。
職場には仕事に来ていると割り切っているものの、
あまりにも噂がすごくて、困っているので相談させてください。

今の職場には、3年くらい前からいます。
ここ2年くらいで部署が急拡大して、人数が増えたあたりから、
ものすごく噂が立ちやすくなりました。

気にも留めず、スルーしてきたのですが、
ちょっとでも男性社員と話して仲良くしたり、
少しでもおしゃれをすると、
「あの人は○○さんと関係を持っている」とか
「○○さんのことが好きらしい」とか
お前は中学生か！？と思うようなくだらない噂が流れるようになりました。

一回職場で仲良くしていた人と酷い噂を流されて以来、
中心となって面白がって流す人たちはわかっているものの、
ここまで流れるということは、職場全体としてそうなのだと思います。
ありとあらゆる人が、いろんな人の噂を流しまくっています。
もう、誰をどう信用していいかわかりません。

少し気になる人はいますが、
私自身、ちょっと目立ちやすいこともあり、
噂になると相手にも迷惑がかかるのでは？と不安です。

嘘の噂とか流した方がいいのでしょうか？？
ほんと、変な話で申し訳ないです。
良い対処方法があればアドバイスをいただけませんでしょうか？