1、靈活就業人員如果要退醫保費，應直接到參保地的醫保經辦機構，憑本人的相關證明材料辦理退費；
2、自稅務部門受理後2個工作日內，將退費資料移交至同級人社或醫保部門；
3、異地退費可通過郵寄或電子郵箱方式傳遞給退費地稅務部門，稅務部門再移交至同級人社或醫保部門；
4、靈活就業人員退保時，只有個人賬戶中的部分費用能退回，劃入統籌賬戶的費用無法退回。
靈活就業退費的影響因素：
1、退費政策：不同地區的退費政策可能有所差異，需要根據當地的規定來確定；
2、繳費時長：已經繳納的社會保險費用時長可能會影響退費的金額和程序；
3、個人賬戶：個人社會保險賬戶的累計金額會直接影響退費的數額；
4、就業狀態：如果個人轉為正式就業，可能需要轉入新的社會保險賬戶，影響退費流程；
5、材料齊全：申請退費時所需提交的材料是否齊全也會影響退費的進度和結果。
綜上所述，靈活就業人員退費的方法包括直接到參保地的醫保經辦機構辦理退費，或通過郵寄或電子郵箱方式傳遞給退費地稅務部門，再移交至同級人社或醫保部門。退保時，只有個人賬戶中的部分費用能退回，劃入統籌賬戶的費用無法退回。
法律依據：
《勞動和社會保障部關於完善城鎮職工基本養老保險政策有關問題的通知》
第三條
城鎮個體工商戶等自謀職業者以及采取各種靈活方式就業的人員，在其參加養老保險後，按照省級政府規定的繳費基數和比例，壹般應按月繳納養老保險費，也可按季、半年、年度合並繳納養老保險費；繳費時間可累計折算。上述人員在男年滿60周歲、女年滿55周歲時，累計繳費年限滿15年的，可按規定領取基本養老金。累計繳費年限不滿15年的，其個人帳戶儲存額壹次性支付給本人，同時終止養老保險關系，不得以事後追補繳費的方式增加繳費年限。