我想和他离婚，他总是托着。不离婚，我该怎么办，我和他有孩子，不在一起，快四年了。