买房时，合同上写着，首付款交给中介公司。但是，我不想交给中介。我该怎么办？合同已经签订了。