每次吵架都想打我离婚，我有两个孩子，他说如果离婚的孩子一个也不给我，我该怎么办。