根据《中华人民共和国劳动合同法》第二十五条规定，用人单位与劳动者约定违约金的情形仅限于以下两种：

  1. 用人单位为劳动者提供专项培训费用并约定服务期，劳动者违反服务期约定的；
  2. 劳动者违反竞业限制约定的。

除上述情形外，用人单位不得与劳动者约定由劳动者承担违约金。但用人单位违反劳动合同法规定解除或终止劳动合同的，应依法向劳动者支付赔偿金。