需要根据情况而定。解除租赁合同时，如果承租人是过错方的话，需要承担责任赔偿，租金就有可能不能退还了。如果出租人是过错方的话，剩余的租金是可以退还的，并且出租人还要承担违约责任，提供相应的赔偿。
依据我国法律规定，当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。
法律依据：
《中华人民共和国民法典》第五百六十六条，合同解除后，尚未履行的，终止履行;已经履行的，根据履行情况和合同性质，当事人可以请求恢复原状或者采取其他补救措施，并有权请求赔偿损失。
合同因违约解除的，解除权人可以请求违约方承担违约责任，但是当事人另有约定的除外。
主合同解除后，担保人对债务人应当承担的民事责任仍应当承担担保责任，但是担保合同另有约定的除外。
第五百六十七条，合同的权利义务关系终止，不影响合同中结算和清理条款的效力。