「人を観察するのが好き」という人の観察対象になった場合

「人を観察するのが好き（趣味）」とか言う人の観察対象になってしまった時、どうしたら良いのでしょうか？

ただ見られているだけなら仕方がない？かもしれませんが、イチイチ観察しての感想だったり、自分勝手な想像（妄想？）
での判断で、感情や人間性などを決めつけられてしまうのが嫌で、面倒で・・・。

そもそも何で私が観察対象？かは解りませんが、自分の思う様な態度を取ってくれないから、みたいな事を言われた事があります。
自分の考え（想像）の範疇を超えると（例えばＡ型ならＡ型っぽい態度を取るとの憶測が出来るが、私は判断が出来ないとの事）。
だから面白いという訳では無く、何処かで手懐け法を身につけてコントロールしたい気持ちもあると思います。
それで、大体自分の思うような態度を取らなく気に入らないからと、態度に対する駄目出しや説教が始まります。

でも、観察対象になった事を自覚して以降、観察されているのを知りながらもスルーするのを得意技の様にやって来ました。
相手に見られてる見られてると知りながら、計算での態度を取っていたのです。輪をかけて、より気に入られない様にと。

だから相手に嫌な態度を取られても仕方が無いと思われるかもしれませんが、相手の思う壺にもなりたくないのです。

でもこの場合、相手に突っ込まれないよう相手に好ましい態度を取るべきでしょうか？