Фамилия Кастовы — редкий случай, где сталкиваются две совершенно разные версии происхождения: бытовая, народная, и книжная, семинарская. Разберём обе, но начнём с той, что лежит на поверхности.

Самое прямое объяснение: прозвище Каст дали человеку, который держался особняком. Слово «каста» в русском языке — это замкнутая общественная группа со своими привилегиями и правилами. Соответственно, Кастом могли прозвать того, кто входил в такую группу (скажем, старообрядческую общину или цеховое братство), либо, наоборот, того, кто своим поведением и взглядами резко отличался от окружающих, словно принадлежал к иному, неведомому «сословию». В этом случае фамилия образовалась по стандартной модели: прозвище Каст плюс патронимический суффикс -ов, то есть «сын Каста».

Однако есть и вторая, не менее убедительная версия — искусственное происхождение. Латинское слово «castus» означает «чистый, непорочный, благочестивый». В духовных семинариях XVIII–XIX веков существовала практика давать ученикам фамилии по латинским и греческим корням. Таким образом, фамилию Кастов мог получить старательный, набожный или просто одарённый семинарист в качестве награды или характеристики. Такие искусственные фамилии оформлялись теми же суффиксами, что и обычные, поэтому внешне Кастов ничем не отличается от фамилии, возникшей из прозвища.

Какая из версий правдоподобнее? Точных данных нет, но стоит обратить внимание на географию. Фамилия Кастов (и Кастовы во множественном числе) встречается не повсеместно, а скорее в центральных и южных регионах России, что может указывать на её позднее, возможно, семинарское происхождение. Если бы корень был чисто прозвищным, мы бы ожидали большего разнообразия однокоренных фамилий, но их практически нет. Это косвенно говорит в пользу «книжной» версии. Тем не менее, полностью исключать народное прозвище нельзя — в разных семьях история могла сложиться по-своему.