我丈夫外出有外遇，我想和他离婚，但他不同意，儿子一直是我母亲的家，现在两岁了，如果离婚，儿子不能还他。