我老公在外面有女人，现在对方怀孕了，我老公知道错了想不要这孩子，各种威胁，请问我们要付什么责任。