Фамилия Ганорский — одна из тех, что ставит перед исследователем загадку с первого взгляда. В ней нет очевидного корня, который сразу подсказал бы профессию или личное имя предка. Самое вероятное объяснение лежит в области географии: фамилия образована от названия населённого пункта с помощью типичного для польской и западнорусской традиции суффикса -ский. Этот суффикс указывал на дворянское происхождение или, в более широком смысле, на связь человека с местностью — владельца поместья или выходца из него.

Исходным топонимом могло быть село или местечко с названием вроде Ганоры, Ганор или Ганорка. Такие названия встречаются в исторических землях Речи Посполитой — на территории современной Польши, Беларуси или Западной Украины. Корень «Ганор» в этом случае, скорее всего, не славянский, а заимствованный. Он может восходить к латинскому honor («честь», «почет»), которое через польское посредничество (honor) дало форму «Ганор». В таком случае название поселения могло быть «идеологическим» — например, фольварк или усадьба, названная в честь какого-либо добродетельного понятия, что было модно в шляхетской среде.

Есть и другая, более прозаичная версия: фамилия могла возникнуть от прозвища Ганор, которое давали человеку с непомерным чувством собственного достоинства, гордецу (от того же латинского honor). В польском языке слово honor имеет ярко выраженный оттенок шляхетской спеси и щепетильности в вопросах чести. Прозвище Ганор могли дать либо в насмешку, либо как констатацию характера. В этом случае фамилия Ганорский — это уже не топонимическая, а «прозвищная» модель, где суффикс -ский присоединился к готовому прозвищу, подчеркивая принадлежность к роду Ганоров.

Менее убедительно выглядит связь с личным именем. В святцах нет имени Ганор, а попытки вывести фамилию из редких форм крестильных имён (например, от Игнатий через народное Ганя) натыкаются на трудность: суффикс -ский редко присоединяли к таким основам напрямую. Скорее всего, предок носителя фамилии Ганорский был либо мелким шляхтичем, владевшим или арендовавшим землю в местечке Ганоры, либо происходил из крестьян, которых записывали по названию деревни. В любом случае, это фамилия западного, польско-литовского происхождения, нехарактерная для исконно московских земель.