您好，我去年年底看了一套房，当时和中介公司先签订了诚意金协议书，因为当时我们出的价格和房东的价格还是有2万块钱的差距，所以和中介公司签订了诚意金协议书，但是诚意金协议书上我们签的日子和中介公司签的日子差了一天，我们是签的2017年1月17日，当时和中介公司谈的是5天之内谈下来，结果他们签的日期是2017年1月18日。等到了23号当天，中介公司把我们和房东约到要卖的房子里当面谈价格，我们当时说49万一毛都不加，房东说51万一毛都不少，然后中介公司就在中间说什么我们加一万，他们中介再从中介费里取出一万，当时我们也就同意了，让后中介公司的人就急匆匆的把居间合同写完让我们签字，对于我们的问题也只是草草回答就让我们签字，最后我们说买卖过程中还有一些费用我们买房要出，你给我们列个清单，结果他们也只是给我们在一张草稿纸上写了几项，当时上边也没写什么按揭费和评估费，就这样我们当时给了房东1万块钱定金，算是把房定了。居间合同也签了。现在问题是过完年他们催着我们去办手续，我俩去了后他们就把我俩领到一家担保公司，然后给我们进行了一系列的签字画押完事后给了我们一张很不正规的交费条让我们交8500，我们当时就很疑惑这个钱？问中介公司的业务员她说她也不确定，反正每个买房的人都会交的，我们想着当时他们店长也没有给我们说有这个费用所以一定得问清楚，电话里中介公司店长也说不清楚，然后我们就回去他们店里谈，当时店长还不承认他没写，后来我就把他年前列的清单让他看他才承认的，最后说那个费用是按揭费和担保费，他没写就算是他的失误他给我们承担3000块，当时让我们给他交5500我们没交。律师您好，现在我们也不想和他们继续交易，在我们为这费用争吵的过程中我们通过中介公司联系到房东本人，房东也觉得这个中介有问题不想和这个中介继续交易。但是我们双方都害怕中介会拿着居间合同让我们去给他们赔偿。现在我们该怎么办？