购房意向已签,因贷款审核原因导致未在约定时间签合同付首付,算买方违约吗

4月27日签订购房意向书,付五万定金,约定5月5日前将首付款打入银行监管账户,但是因为公积金贷款审核很慢,中介在5月8日才通知面签并打首付款,5月9日卖方以逾期未打首付款为由,说买方违约,不退定金,不愿签订购房合同。请问这种情况下是算买房违约吗?定金还可以要回来吗?