房产更改由于我父母离异,从小跟随奶奶…

房产更改由于我父母离异,从小跟随奶奶长大,而我爸是奶奶收养的,现又再婚,并在在市里买房居住。我爸从未尽过赡养老人,抚养子女的义务,现在我与奶奶爷爷居住在祖房里,祖房是我爷爷奶奶建造的,后因年事已高,房子便更名在我爸名下,由于现在要搬迁,我爸不尽赡养义务,所以我奶奶想要回房子,我们应该怎么办?急需您的帮助。