如果竞业限制协议本身是合法有效的，而原单位也履行了支付竞业限制补偿金的义务，那么具有竞业限制义务的劳动者在离职后违反竞业限制协议的，原单位可以依法要求劳动者支付违约金。如果原单位没有支付竞业限制补偿金，那么是原单位违约在先，劳动者可以不受竞业限制。

法律依据：
《中华人民共和国劳动合同法》
第二十三条，用人单位与劳动者可以在劳动合同中约定保守用人单位的商业秘密和与知识产权相关的保密事项。
对负有保密义务的劳动者，用人单位可以在劳动合同或者保密协议中与劳动者约定竞业限制条款，并约定在解除或者终止劳动合同后，在竞业限制期限内按月给予劳动者经济补偿。劳动者违反竞业限制约定的，应当按照约定向用人单位支付违约金。
第二十四条，竞业限制的人员限于用人单位的高级管理人员、高级技术人员和其他负有保密义务的人员。竞业限制的范围、地域、期限由用人单位与劳动者约定，竞业限制的约定不得违反法律、法规的规定。