现在派出所不让开了我想把下剩的房租退回来，但房主不退当时我们双方都签字画押合同上写着处于特服原因房主因当退还下剩的钱现在房主不退我该怎么办。