Фамилия Гороховцев образована от прозвища Гороховец, которое ведет свое начало от названия населенного пункта Горохово или Гороховец. Скорее всего, основатель рода Гороховцевых был родом из города Гороховец, который расположен в Волжско-Окском междуречье, на правом берегу Клязьмы, в 157 км к востоку от Владимира. Город известен с 1158 года. Земли вокруг Гороховца уже в XI веке были заселены славянами. Первоначальное ядро города составлял детинец, расположенный на Никольской горе. Высота его земляных валов, сооружённых в XII веке, достигала пяти метров. В 1239 году Гороховец был сожжён монголо-татарами дотла, после чего жизнь в городе надолго замирает. В XV веке Гороховец принадлежал нижегородскому, а затем московскому князю и числился центром волости. В 1778 году Гороховец сделан уездным городом Гороховецкого уезда Владимирской губернии. В 1883 году в Гороховце было 24 каменных дома и 381 деревянный; 69 лавок, 5 церквей и 1 монастырь, Николаевский. В 1883 году в городе было 3 кирпичных завода и одна красильня. Кроме того, было много садов, а жители занимались огородничеством и прядением тонких ниток. Само название города восходит к слову «горох» — стручковое растение, используемое в обрядовой практике. У славян известны сказочные мотивы о рождении богатыря по имени «Покатигорошек» из горохового зерна, которое проглотила мать-царица. В результате, потомок человека, обладающего прозвищем Гороховец, со временем получил фамилию Гороховцев.