劳动者可以直接离职并且向劳动监察部门投诉或者申请劳动仲裁向单位要回这笔费用。因为劳动单位不可以擅自的在劳动合同中向劳动者收取费用,也不可以随便的约定违约金。只有在以下的几个情况劳动合同可以约定违约金:
1、在培训服务期约定中可以约定违约金。用人单位为劳动者提供专项培训费用,对其进行专业技术培训的,可以与劳动者订立协议,约定服务期。违约金的数额不得超过用人单位提供的培训费用。用人单位要求劳动者支付的违约金不得超过服务期尚未履行部分所应分摊的培训费用。
2、在竞业限制约定中可以约定违约金。用人单位与劳动者可以在劳动合同中约定保守用人单位的商业秘密和与知识产权相关的保密事项。对负有保密义务的劳动者,用人单位可以在劳动合同或者保密协议中与劳动者约定竞业限制条款,并约定在解除或者终止劳动合同后,在竞业限制期限内按月给予劳动者经济补偿。