因此，勞動者在遵守上述法律的情況下，有權拒絕加班。但《中華人民共和國勞動法》第四十二條和《勞動部貫徹國務院關於職工工作時間規定的實施辦法》第七條規定的五種情形，職工不得拒絕加班。
其次，用人單位以勞動者拒絕加班為由與勞動者解除勞動合同是違法的。根據《勞動合同法》規定，用人單位違法解除勞動合同的，勞動者有權要求繼續履行勞動合同，也有權要求用人單位按照經濟補償標準的兩倍向勞動者支付賠償金。
法律依據:《勞動合同法》第三十九條:有下列情形之壹的，用人單位可以解除勞動合同:
(壹)在試用期內，被證明不符合錄用條件的；
(二)嚴重違反用人單位規章制度的；
(三)嚴重失職、營私舞弊，給用人單位造成重大損害的；
(四)勞動者同時與其他用人單位建立勞動關系，對完成本單位工作任務造成嚴重影響，或者經用人單位提出拒不改正的；
(五)因本法第二十六條第壹款第壹項規定的情形致使勞動合同無效的；
(六)被依法追究刑事責任的。
《勞動合同法》第四十條有下列情形之壹的，用人單位提前三十日以書面形式通知勞動者或者額外支付勞動者壹個月工資後，可以解除勞動合同:
(壹)職工患病或者非因工負傷，在規定的醫療期滿後，不能從事原工作也不能從事由用人單位安排的其他工作的；
(二)勞動者不能勝任工作，經過培訓或者調整工作崗位，仍不能勝任工作的；
(三)勞動合同訂立時所依據的客觀情況發生重大變化，致使勞動合同無法履行，經用人單位與勞動者協商不能就變更勞動合同內容達成協議的。