Фамилия Харовский — классический пример географической фамилии, образованной по модели «название места + суффикс -ский». Такие фамилии в дворянской и духовной среде чаще всего указывали на родовое поместье или место рождения. В основе фамилии — топоним Харово или Харовск. На карте России таких точек несколько: деревня Харово есть в Вологодской и Кировской областях, а город Харовск в Вологодчине стоит на реке Харовке. Вероятнее всего, предок носителя фамилии владел землей или происходил из одного из этих мест.

Менее распространённый, но возможный вариант — происхождение от прозвища или имени Хар (сокращение от Харитон, Харлампий или Харлам). В этом случае суффикс -ов- дал бы форму Харов, а уже от неё через притяжательное значение возник Харовский. Такая цепочка встречается реже, но полностью исключать её нельзя: в русской ономастике известны случаи, когда к уже готовой фамилии на -ов добавляли дворянский суффикс -ский.

Интересна и гидронимическая версия: река Харова (в бассейне Северной Двины) могла дать имя поселению, а затем и фамилии. В этом случае Харовский — «живущий на Харове», что типично для северорусских фамилий. Обратите внимание на суффикс: -ский указывает на принадлежность, а не на прямое происхождение от личного имени, что делает топонимическую версию основной. Фамилия редкая, в дореволюционных справочниках почти не встречается, что говорит о её позднем оформлении или локальном бытовании, например, среди вологодского духовенства или мелкопоместных дворян.