Le donneur d'ordre mentionné par les dispositions de l'article L. 412-3 peut, après avoir mis la personne détenue en mesure de présenter ses observations, mettre fin au contrat d'emploi pénitentiaire en cas d'inaptitude ou d'insuffisance professionnelle ou, lorsque le donneur d'ordre est une structure d'insertion par l'activité économique ou une entreprise adaptée, en cas de non-respect de l'accompagnement socioprofessionnel proposé.
Le donneur d'ordre peut également mettre fin au contrat d'emploi pénitentiaire en cas de force majeure, pour un motif économique ou, lorsque le donneur d'ordre est l'administration pénitentiaire, pour un motif tenant aux besoins du service.