我认识一个男人四年了，他说他和他的妻子离婚了，但他从未离开过。现在我要和他分开了，他不同意和他的妻子要钱。