灵活就业保险是可以退保的。根据相关规定，灵活就业人员参加社会保险后，如果不再符合参保条件或自愿终止保险关系，可以向当地社保经办机构申请退保。退保时需要提供本人身份证、社保卡等材料，并填写退保申请表。

需要注意的是，退保后之前缴纳的保费可能无法全额退还，具体退还金额和规则以当地社保政策为准。建议退保前咨询当地社保部门了解详细流程和影响。