我和前夫离婚了，现在还来骚扰我，还说我骗他的钱，其实钱是他自己给的，这个怎么才能不说话。