これは横入りになるのか？

トピ開いて頂きありがとうございます。 先日ある店でレジに並ぼうとした時の事です。 小さい子連れの若い女二人組が私の少し先に歩いていて、一人がレジの並びから少し離れた後ろの方に立ち止まって もう一人はその先の商品を取りに行っていました。 私はそのレジの並びから少し離れて立っていた女の横を通りそのレジに並ぼうとした所、 レジの台には次の人のかごが置いてあったので、離れて立っていた女がもう一人と並んでいるのだと気付きその女の後ろに並びました。 そうしたところ、商品を取りに行っていた女が戻って来たら、立っていた女がこっちに聞こえるように「ジジイが横入りしようとしやがった」と言いました。 ちゃんとレジの並びにいたならともかく、離れて立っていて並んでいるとは思えないから入ろうとして かごがあるのに気づいてすぐ後ろに並び直したのにそんな事を言われて腹が立ちました。 これは他の人から見ても横入りしようとした事になるのでしょうか？ 自分としては気が付いてすぐ並び直したし文句を言った訳でもありませんので横入りと言われる筋合いはないと思っていますが。