我于今年4月1日在房屋中介签订一份房屋买卖合同,上面写明卖方应在今年6月30日前与我办理过户是否可以不付给中介赔偿金的一半?

我于今年4月1日在房屋中介签订一份房屋买卖合同,上面写明卖方应在今年6月30日前与我办理过户,否则将退还定金2万元及赔偿2万元,赔偿金的一半给中介,但是到现在卖方都办理不了,我要求中介去交涉退款及赔偿,但中介说去了,但卖方拿不出钱现在,我决定起诉卖方,但是我觉得中介没有起到作用,是否可以不付给中介赔偿金的一半?