关于房屋交易问题 我买二手房，通过中介，与卖房人签订了三方合同，合同中要求在签合同时要交5000的中介费与3000的贷款手续代办费。当时提出异议，经口头协商，约定：先交5000的中介费，等贷款手续办完后，再叫3000的代办费，并随后打了欠条。
现在中介公司以月底扎帐、口头约定为业务员私自同意为由，要求交3000的代办费，如果不交，不给办后续的贷款手续。

请问，我应该怎么办？不交钱，不用他们代办了行吗？

现在只是过户了，其他贷款手续都还没办

二手房贷款手续，自己也可办理。