Фамилия Кастов образована от личного прозвища и относится к распространенному типу русских фамилий. Фамилия Кастов образована от прозвища Каст, которое восходит к нарицательному «каста» - «замкнутая общественная группа, которая хранит свою отделенность и привилегии». Можно предположить, что основатель рода Кастовых получил своё прозвище за принадлежность к какой-либо закрытой группе, или же он сильно отличался от своего окружения своим мировоззрением и поступками. Согласно другой версии, фамилия Кастов ведет свое начало от латинского прилагательного «castus» - «чистый, непорочный, целомудренный, благочестивый, набожный» и имела искусственное происхождение. Поначалу такие фамилии служили для идентификации личности безымянных детей (как правило, незаконнорождённых, а также сирот и найдёнышей). Чаще всего искусственные семинарские фамилии восходят к латинским или греческим основам и оформляются традиционными русскими фамильными суффиксами: –ов (–ев), –ин, –ский. В таком случае можно предположить, что фамилию Кастов семинарские наставники присвоили старательному, одарённому, благочестивому ученику. Таким образом, потомок человека, обладающего прозвищем Каст, со временем получил фамилию Кастов. О точном месте и времени возникновения фамилии Кастов в настоящее время говорить сложно, поскольку процесс формирования фамилий был достаточно длительным. Тем не менее, фамилия Кастов представляет собой замечательный памятник славянской письменности и культуры.