Фамилия Горжина — яркий пример «матронимической» фамилии, то есть образованной не от имени отца, а от имени или прозвища матери. В русской традиции такие фамилии встречаются реже, чем отчества по отцу, и обычно указывают на особые обстоятельства: женщина могла быть главой семьи, вдовой, или же её имя было более известным в округе, чем имя мужа. Суффикс -ин в фамилии Горжина прямо указывает на принадлежность: «чей?» — Горжин, то есть сын или потомок Горжи.

Основа фамилии — женское имя Горжа. Это имя неканоническое, то есть отсутствующее в святцах, и его происхождение стоит искать в народных, диалектных формах. Наиболее вероятная версия: Горжа — это вариант имени Агриппина (в просторечии — Аграфена, Гаруся, Горюня). В русских говорах имя Аграфена могло сокращаться до Горюня, Горюха, а затем и до Горжа. Второй путь — от имени Пелагея, которое в некоторых областях звучало как Палажа, Полажа, а затем могло перейти в Горжа через чередование согласных. Обе версии укладываются в народную привычку «обкатывать» длинные церковные имена до коротких и удобных в быту.

С географической точки зрения фамилия Горжина тяготеет к южнорусским и центральным областям, особенно к бывшим Курской, Орловской и Тамбовской губерниям. Там подобные формы женских имён (Горюня, Горжа) фиксировались в документах XVIII–XIX веков. Фамилия не относится к числу дворянских — её носителями были крестьяне и мещане, у которых прозвище или уличное имя матери закреплялось как официальная фамилия при переписях.

Поскольку корень «горж-» не имеет прямого значения в русском языке (в отличие, скажем, от «горб-» или «горд-»), все попытки связать его с «горлом», «горшком» или «горой» — это народная этимология. Лингвистически надёжнее видеть здесь редуцированную форму христианского имени, изменённую под влиянием местного говора. Таким образом, фамилия Горжина — не про профессию или внешность предка, а про его мать, которую в деревне звали Горжей, и это имя со временем стало родовым.