我该怎么办他在外面有情人，而且是公开…

我该怎么办他在外面有情人，而且是公开的带在他的亲戚面前露面,我一直在家代孩子和上临时班,没有时间去找证据,因为这事,我现已没上班,结果亲眼看见他们在一起.想离婚,可他又不同意,而且他在外面借了很多钱,我都不知道,我该怎么办?