在离婚时两个孩子都给男方了，财产上写无，但是事实我们有财产，如果他想要回去，能不能要回去。