Фамилия Кастравец звучит не по-русски, и это верное впечатление: её основа — белорусское или западнорусское прозвище, а суффикс -ец указывает на происхождение человека из определённого места. В отличие от типичных русских фамилий на -ов/-ев, модель на -ец характерна для западных регионов, особенно для Беларуси, а также для Украины и Польши. Фамилия образована от топонима — названия населённого пункта Кастравцы или Кастрово, которые встречаются на территории современной Беларуси. Человек, переселившийся оттуда, получал прозвище Кастравец, то есть «тот, кто из Кастравцов».

Основа «Кастр-» тёмная и не имеет однозначного толкования в славянских языках. Наиболее вероятно, что это адаптация балтского корня: в литовском есть слово «kastras» (костёр, очаг) или «kastyti» (копать, рыть). В таком случае первичное значение могло быть связано с местом, где жгли костры, или с вырытым углублением. Возможна и связь с латинским «castrum» (укрепление, замок), но это скорее книжное влияние, нежели народная традиция. Менее правдоподобна версия, возводящая фамилию к глаголу «кастрировать» — она возникла бы в народе как прозвище, но тогда форма ожидалась бы иной, например, Кастрат или Кастров.

Географически фамилия Кастравец редкая и привязана к западу: носители встречаются в основном в Беларуси (Минская, Гродненская области) и в приграничных регионах России, а также среди белорусских переселенцев в Сибири. Социально это крестьянская фамилия: человек, которого называли по месту выхода, не имел привилегированного статуса. В дворянских гербовниках она не зафиксирована.

В написании фамилии возможны варианты: Кастравец (с ударением на последний слог) и реже Кастровец — в зависимости от местного произношения. В русских документах XIX века её могли записать как Кастровец, но современная орфография тяготеет к исходной белорусской форме.