如果经过协商，对方同意解除合同，可能买房人也要承担一定的违约责任，赔偿对方的损失，所以，首付款一定是不能全部退还的。
《民法典》：
第四百六十五条规定依法成立的合同，对当事人具有法律约束力。当事人应当按照约定履行自己的义务，不得擅自变更或者解除合同。依法成立的合同，受法律保护。
第五百六十二条规定当事人协商一致，可以解除合同。
当事人可以约定一方解除合同的条件。解除合同的条件成就时，解除权人可以解除合同。
第五百七十七条规定当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。
