离婚协议书约定房产归男方,债务由男方承担,如果男方不还房贷,你帮男方还上贷款,可以向男方追偿。但你们的约定不能对抗银行,对于银行来讲,你们的还款义务是连带责任。如果你们都不还的话,对你们双方的征信都会有影响。