拿房顶帐,都是亲戚没有书面协议,现又…

拿房顶帐,都是亲戚没有书面协议,现又想要房又不想承认该钱。我该怎么办?2001年我【孙**】二兄弟【孙**】和兄弟媳妇找到我说;我该孙**【妹妹】的4万块钱还不上了,连利息都给不起了,想把村里的老房抵帐给她她又没用,不是一个村的,你两儿子一层房基地,就把老房给你吧,你还孙**钱吧帮帮我吧!随后想想我就答应了,把钱给还了,当年我就住进去了。就在房抵账了以后我二兄弟又在我们村要了一层房基地。在2008年的时候我二兄弟【孙**】得病去世了,过一年多我二兄弟媳妇就风言风语说出想要回房,起初听到这话还去找她了她还说;房我该要要钱我该还还,现在却说当初孙**要和她闹离婚她不知道该钱抵账的事。现在我该怎么办?