В упомянутом выше слове ударение следует ставить на слог с буквой А — кАторжные.
Впрягшись в телегу, ухватившись за оглобли, ка́торжные везут навоз.
— Влас Дорошевич, Каторга. Преступники
И ка́торжные, с топорами, пилами, веревками, срываются с места, бегут вприпрыжку, стараясь согреться на ходу.
— Влас Дорошевич, Каторга. Преступники
Ка́торжные, только разряда исправляющихся, освобождаются от работ в последние три дня Страстной недели.
— Влас Дорошевич, Каторга. Преступники
Само собою разумеется, что прежние ка́торжные, настоящие гражданские ка́торжные, лишенные всех своих прав, клейменые и обритые вдоль головы, остались при остроге до окончания их полных сроков; новых не приходило, а оставшиеся помаленьку отживали срок и уходили, так что лет через десять в нашем остроге не могло остаться ни одного каторжного.
— Федор Достоевский, Записки из Мертвого дома. Рассказы
А на каторге нет ни политических, ни уголовных, есть только ка́торжные.
— Константин Седых, Даурия