如果灵活就业人员中途退保，可能受以下条件限制：

-未达到法定退休年龄，但缴纳社保年限未满15年。

-重复参保的人员。

-移居海外。

-去世。

在符合条件的情况下，可以提出退出申请。需要注意的是，退保只能够退回个人账户养老缴费部分，而退不回统筹账户部分，其实是非常可惜不划算的。建议你在决定退保前，详细了解相关政策和规定，并谨慎做出决策。