我和前夫离婚后我买了房有一部分钱是他…

我和前夫离婚后我买了房有一部分钱是他出的房产证上只有我的名字现在他又和我纠纷房子我该怎么办我和前夫离婚后双方考虑到孩子又在一起过日子可他坚持不办复婚手续之后以我个人的名义买了一套房子其中他出了一部分钱，还和我私下签订以后无论他怎样对我我都要一心一意的跟着他即使他和别的女人去结婚如果我做了什么对不起他的事房子他自行处理可我们总是矛盾不断现在他又于我和男性朋友在楼下讲话为由要求我搬离住所请问我该如何保护我的合法权益