当时买房子时，对方给我们买房子的生存条件。承包的土地承包了十几年的土地，现在对方想回去。该怎么办呢？当时签了分包合同，无限期。