月極駐車場でいつも停めている場所に柵に凹みがあり、柵の持ち主からぶつけたのか問われた。

月極駐車場でいつも止めている場所の後ろの柵に凹みがあり、その持ち主からぶつけたのか問われました。しかし、身に覚えがなく車にもキズは無かった為その旨を伝えました。
その方曰く、警察に通報するかもしれないと言われましたが自分の可能性もあるかもしれないですが身に覚えもないので何か有ればご連絡下さいとお伝えし帰りました。

状況的には私の可能性が高いかもしれないのですが本当に身に覚えがありません。
状況証拠などで私がやったと断定された場合身に覚えがなくても、損害賠償責任に問われますか？