买方违约还需不需要赔卖方的中介费呢

不需要的。买方违约，卖方主张买方承担违约责任，赔偿损失。但卖方与中介公司签订的合同，如果中介公司没有违约，卖方需要支付中介费，不需要买方承担，这是属于不同的法律关系。
《中华人民共和国民法典》第五百七十七条【违约责任】当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。