人とずれてて会話で失敗します

私には、会話の中で他人の反応がよくわからないことがあります。
どなたか、説明していただけないでしょうか。

つい最近では、つい数週間前にパートを始めたばかりの会社でこんな会話がありました。


前提としては、社長が私達のいる支社に来ることになっていて、空港まで社員が車で迎えに行くことになっていました。空港から会社までは1.5ｋｍほどです。地下鉄やバスでは移動しにくい場所にあります。歩いたら20分くらいでしょうか。

私：「○○さんが車で迎えに行くらしいよ。歩くには遠いもんねえ」
同僚：「言うねえ」　←　この反応がわかりません。
私：（意味がわからず、もしかして失礼なことだったのかと思って）「適当なバス路線も無いし、あとはタクシーに乗るくらいしか方法がないしねえ」
同僚：「ああ、タクシーって方法もあるね」

勤め始めたばかりで、誰かが支社に来るのも初めてでした。それまで勤めていた会社では、出張で来る人を出迎えに行くなんてことは無かったので、とても珍しく感じていたのです。社長に歩いて来いって思っていたわけではありません。確かに歩くにはちょっと遠いと、単純な感想を言っただけだったのですが・・・

私には、こういう（私にとって）思いがけない反応をされることがよくあります。私の常識が世間とずれているせいだと思い、発言する際には、注意をしているのですが、たまに失敗します。

私の発言は不遜だったのでしょうか。
やっぱりよくわかりません。単に歩くにはちょっと遠いという事実を、単に言っただけのつもりだったのですが。