非法集资的钱在一定条件下会退给受害者。首先,司法机关会对非法集资案件进行侦查、起诉和审判。在案件审理过程中,会对涉案资产进行清查、追缴和处置。其次,若能追回非法集资的资金,会按照一定程序返还给受害者。一般是根据受害者的受损情况、参与集资的金额等因素,确定返还比例和金额。根据《防范和处置非法集资条例》规定,非法集资人、非法集资协助人应当向集资参与人清退集资资金。清退过程应当接受处置非法集资牵头部门监督。不过,由于非法集资案件情况复杂,资产处置存在多种情况,比如资产已被挥霍、转移等,可能无法全额追回资金退给受害者。但司法机关会尽最大努力,通过各种手段挽回受害者损失,最大程度维护受害者权益。
以上是律师的法律建议,如有疑问,欢迎进一步咨询。