公安要叫家属退还赃款合法。
诈骗罪退赃流程依照法定程序。应该主动退赃的。不管是否属于团伙犯罪，公安机关在侦查期间应进行追赃，但公安机关只能对犯罪所涉的赃款、赃物进行追赃，如果不能追到赃款、赃物的，公安机关对于犯罪嫌疑人个人的合法财产不能进行处理，公安机关也不能强制要求犯罪嫌疑人或其家属以其合法财产来退赃。公安机关追回的赃款会移交检察院，在起诉过程中移交法院，可以分清原主的，交还原主，现金诈骗追回金额不够全额退赃的，按被害人人数进行平均退还，对生活确实有困难的，急需用钱的经协商可以先行还款。诈骗案件涉及赃款赃物由公安机关负责追缴，如果财产确实是属于被害人的，就会退还给被害人。家属不退赃的后果是可以对犯罪分子酌情从重处罚。
刑事案件中的赃款赃物具有两个方面的主要特征：
1、具有证据价值和经济价值的双重属性。赃款赃物与案件真实情况的发生、发展有着客观内在的联系，因而对案件具有证据价值；
2、赃款赃物必须是行为人采用违法犯罪手段所获取的财物，它既不同于作案工具，也不是行为人的个人合法财产，更不是违禁品。
赃款赃物的归属去向情况如下：
1、赃款赃物随案移送至法院，由其判决处理；
2、审结的案件赃款赃物通过财政部门上缴国库；
3、依法退还被害法人或者被害自然人。
综上所述，赃款是贪污、受贿、盗窃等非法获取的钱。根据我国法律规定，对于犯罪分子违法所得的一切财物，均应比公、检、法机关予以追缴或者责令退赔。退赔赃款可以作为一个量刑情节，在一定程序上可以减轻处罚。案情较轻的话，可以争取取保或判决缓刑。对于犯罪分子决定刑罚的时候，应当根据犯罪的事实、犯罪的性质、情节和对于社会的危害程度，依照刑法的有关规定判处。而不退赃属于可以从重处罚的情节。
【法律依据】：
《最高人民法院关于刑事附带民事诉讼范围问题的规定》第五条
犯罪分子非法占有、处置被害人财产而使其遭受物质损失的，人民法院应当依法予以追缴或者责令退赔。被追缴、退赔的情况，人民法院可以作为量刑情节予以考虑。经过追缴或者退赔仍不能弥补损失，被害人向人民法院民事审判庭另行提起民事诉讼的，人民法院可以受理。
《中华人民共和国刑法》第三百八十三条
【贪污罪、受贿罪的处罚规定】对犯贪污罪的，根据情节轻重，分别依照下列规定处罚：
（一）贪污数额较大或者有其他较重情节的，处三年以下有期徒刑或者拘役，并处罚金。
（二）贪污数额巨大或者有其他严重情节的，处三年以上十年以下有期徒刑，并处罚金或者没收财产。
（三）贪污数额特别巨大或者有其他特别严重情节的，处十年以上有期徒刑或者无期徒刑，并处罚金或者没收财产；数额特别巨大，并使国家和人民利益遭受特别重大损失的，处无期徒刑或者死刑，并处没收财产。
对多次贪污未经处理的，按照累计贪污数额处罚。
犯第一款罪，在提起公诉前如实供述自己罪行、真诚悔罪、积极退赃，避免、减少损害结果的发生，有第一项规定情形的，可以从轻、减轻或者免除处罚；有第二项、第三项规定情形的，可以从轻处罚。
犯第一款罪，有第三项规定情形被判处死刑缓期执行的，人民法院根据犯罪情节等情况可以同时决定在其死刑缓期执行二年期满依法减为无期徒刑后，终身监禁，不得减刑、假释。
温馨提示：答案为网友推荐，仅供参考