我在一家没按劳动法小公司上班,一个月前我就跟老板说要离职,他口头答应我

我在一家没按劳动法小公司上班，一个月前我就跟老板说要离职，他口头答应我到月底走，可是到月底我找他他却说我没跟他说，也不让我走，他说如果我走就一分工资都拿不到，我不知道怎么办，请问这种事情该找那些有关部门处理呢