小石が当たった。これって物損事故？

昼休みに車で買い物をして会社に帰る途中のことです。後ろの車にクラクションを鳴らされました。 すぐ先の会社に停車したら、後ろの車の人が降りてきて「あなたの車の石が私の車に当たりましたよね」って言うのです。私は身に覚えがないのですが、前の車のタイヤの石が屋根に当たったと言うのです。 傷がついたか確認すると言ってしばらく来なかったので何事も無かったのかと思っていたら、１５分くらいしてからまたやって来て「やはり屋根の塗装が剥がれていました。確認してもらえますか」ということで車の所に行ったのですが、屋根の高い車だったことと、雨模様だったのではっきりと確認はできませんでした。 それで私の方で修理をするということにして、明日塗装屋に出すのですが、どうも納得がいきません。 やはり私の過失なのでしょうか？ 不慮の事故にも思えるけど？ 「私がそんなの知らないよ。どこに証拠があるの？」って言ってしまえば良かったのかな・・・なんてちょっと後悔。 こんな経験のある方、くわしい方、ご意見お待ちしています。