根据双方的约定,主要看学校的状况,如果学校认为校工不享受寒暑假,你只能接受,否则,你可与之解除劳动关系,因为你不是教师寒暑假是学校这个特殊行业所享有的特殊假期,学校后勤工作人员与学校建立了劳动法律关系,依照劳动法的相关规定,享受法定节假日和双休日。