Фамилия Горбицкая — женская форма фамилии Горбицкий. В её основе лежит топоним: Горбицы, Горбица или похожее название места. Такие фамилии на -ский/-цкий в классической модели получали дворяне по названию своего поместья, но в XIX веке по той же схеме массово образовывали фамилии и для духовенства, и для выходцев из мещан, и для крестьян, переселившихся из одной деревни в другую. Поэтому Горбицкие могли быть и потомками помещиков, и семинаристами, и просто крестьянами, записанными по месту прежнего жительства.

Конкретный топоним, скорее всего, связан со словом «горб». В славянской топонимике так называли не только физический изгиб спины, но и выпуклый холм, возвышенность, крутой берег реки. Деревня Горбы, Горбицы или урочище Горбица — типичные названия для холмистой местности в Беларуси, на западе России и в Украине. Форма с суффиксом -иц- (Горбица) указывает на уменьшительность: не большой горб, а небольшой холмик или бугор.

Суффикс -ск- в фамилии — типичный «географический» маркер. Если бы предка звали просто Горб или Горбатый, он получил бы фамилию Горбов или Горбатов. Но форма Горбицкий чётко говорит: «человек из Горбиц». Это отличает фамилию от более распространённых прозвищных моделей и сужает круг поисков для генеалога — искать родоначальника стоит в конкретном селе или деревне с похожим названием.

В написании возможна путаница с фамилией Горбецкая. Разница в суффиксе: -ецк- против -ицк-. Горбецкая образована от «горбец» (маленький горб) или от названия Горбцы, а Горбицкая — от «горбица». На слух в безударном положении они звучат почти одинаково, поэтому в документах XIX века могли писать одно вместо другого.

Ударение в фамилии обычно падает на второй слог: Горби́цкая, хотя в некоторых говорах возможно ударение на первый слог (Го́рбицкая) — это зависит от местного произношения исходного топонима.