Heures payées non effectuées

Bonjour,
Je travail en tant que serveur dans un restaurant gastronomique, je suis actuellement dans une procédure de licenciement économique, mon employeur m'a précisé que je leur devait plus de 80 heures de travail non effectuées (il nous demandait de partir avant la fin du service parce qu'il n'y avait pas de client), ces 80 heures s'étalent sur plus d'une année.

Il m'a donc laissé le choix, soit il décompte ces heures des congés payés qu'il me doit, soit je fais mon préavis sans être payé pour compenser ces heures...

A-t-il le droit de faire ceci?
Qu'ai je comme recours?

Merci beaucoup pour votre attention.