因男方有外遇,我們在婚姻登記處協(xié)議離的婚,協(xié)議書里寫明現(xiàn)在住的房子歸兒子,男方和男方母親要搬離此住房,可現(xiàn)在男方已經(jīng)搬走和他人同居了,可不愿意把母親帶走,請問我該怎么辦?