買うと決めた服を、持ってただけのつもりでしたが

ショッピングセンターの洋服店での話です。 セールで混んでいて、私が見ようとしていた売り場はずっと人がたくさんいたので 少しすいたところを見計らって見に行きました。 良さそうだと思った服を手にとってみて「これは買い！」と決めたので 腕にかけて他の服も見ていました。 他のもデザインが気に入って欲しかったのですが、 サイズがなかったのであきらめてレジに行きかけると、 私と同じ売り場にいた2人連れの1人が、 「私が買おうと思ってたのをもってっちゃったよ！」と言い 「これだからおばさんは・・・」というようなことを大声でいろいろ言っていました。 全部は聞き取れませんでしたが、私に向かって言ってたとおもいます。 商品を手に取るときに他の人をさえぎったり、 明らかに見ているものを取ったりしないように気をつけていたつもりだったので、 何？私、何かした？！とギョッとしてしまいました。 もしかしたら、私が、 「買うとは決めてないけど良さそうなものをしっかりキープしつつ、 他を物色して、やっぱりいらなかったからキープしたものを買った。」と思って それを厚顔無恥な行為だと責めているのかな？とすこし考えてしまいました。 私は一人だったので、私が買うと決めたかどうかは誰にもわからないですし。 彼女も、私が持っていたものを手にとってみたくて、 私が棚に戻すのを待っていたのかもしれません。 会計を済ませて売り場を通り抜けて店を出るまで、 その2人はじーっとこちらを見ていました。 もう買うと決めたものを持ってただけ、と自分では思っていても 何かがダメだったんでしょうか。ここ数年、ネットでばかり洋服を買っていて お店で買うことがかなり減ってきていたので なにか当たり前のルールに抵触したのでは？と気になってしまいました。 買うと決めたものは、手に持っていないでレジに預けたほうがよかったのでしょうか。