三年前结婚的时候买了目前住的这间房子，屋龄约22年，大约两年前开始，我家楼下3楼（住四楼）三不五时上来按门铃问我们有没有拿东西敲地上，我们家基本上就只有我跟我先生，还有那时候刚出生的小孩跟一只小型犬，我们根本不可能无聊到拿东西去敲地板，而且我那时候刚做完月子，自己在家顾小孩，老公还要上夜班，我们休息都不够了，小孩也才出生，真的没有任何理由也不可能这样做！跟他说了他也不信，陆续上门来说我们干扰他，甚至有一次半夜叫警察来，连警察都说声音不一定是我们造成的，他还说我们是不是故意拿榔头敲地板，报复他们！但是我们真的ꠊS那么无聊啊！有时候我回娘家去一二个月，老公上班去，家里没人，他也说他有听到声音。我跟他说有没有可能是房子老旧，加上之前南部常大地震，建筑结构改变的关系！而且我上网查，说大楼的管线都在二三楼，我们这里的一二楼是挑高楼中楼，会不会也是有影响。他老是坚持是我们敲的，我们真的很无言也很火大！就真的我们没有做的，你硬要说是我们做的是想怎样啊！
想请教各位到底该怎么处理这件事情啊？我现在怀二宝，睡都睡不好到重感冒，还要照顾一个小孩，火气已经很大了，还要老是被邻居烦！