灵活就业人员缴纳的社保，在参保人去世后，是可以退还的，根据《社会保险法》规定，参加基本养老保险的个人，因病或者非因工死亡的，其遗属可以领取丧葬补助金和抚恤金；在未达到法定退休年龄时因病或者非因工致残完全丧失劳动能力的，可以领取病残津贴，所需资金从基本养老保险基金中支付。

建议参考：

1、及时办理退保手续：参保人去世后，其法定继承人或遗嘱继承人应在 30 日内到社会保险经办机构办理社会保险退保手续。

2、准备相关材料：办理退保手续时，需要提供参保人死亡证明、火化证明或户籍注销证明、继承人身份证明、继承人与参保人关系证明、继承人银行卡等材料。

3、注意退保时间：退保手续应在参保人去世后的 30 日内办理，逾期未办理的，将无法退还社保个人账户余额。

相关法条：

《中华人民共和国社会保险法》

第十七条 参加基本养老保险的个人，因病或者非因工死亡的，其遗属可以领取丧葬补助金和抚恤金；在未达到法定退休年龄时因病或者非因工致残完全丧失劳动能力的，可以领取病残津贴，所需资金从基本养老保险基金中支付。