Фамилия Каторжин образована от прозвища Каторга и восходит к аналогичному нарицательному (от древнегреческого katergon – «галера»). Скорее всего, одним из таких заключенных и был основатель рода Каторжиных. Так и прозвище Каторга закрепилось за человеком в качестве наиболее употребительного именования, а со временем легло в основу фамилии Каторжин. Таким образом, потомок человека, обладающего прозвищем Каторга, со временем получил фамилию Каторжин.