非法同居怎么办？女人是我母亲，离婚了。男人还没有。男人有两个女儿，一个孙子。