Фамилия Хваржев — редкий случай, когда написание подсказывает путь разгадки. Сочетание «хв» в начале слова для русской фамилии нетипично. Скорее всего, перед нами фамилия польского или западноукраинского происхождения, записанная на слух русским чиновником или писцом. Исходная форма могла звучать как Хваржевский или, что вероятнее, Хваржевич, а корень восходит к польскому слову «chwarz» (произносится «хфарж»), которое означает «сварливый», «ворчливый», «склочный человек». В старопольском языке это слово было прямым прозвищем для человека с тяжёлым характером.

Фамилия образована по типичной восточнославянской модели с суффиксом -ев, который присоединили к основе Хварж-. Если бы фамилия осталась в польском варианте, она звучала бы как Хваржевский (с суффиксом принадлежности -ский) или Хваржевич (с отчественным суффиксом). Переход в форму на -ев произошёл, вероятно, при переселении носителя на территорию, где действовали русские канцелярские нормы: писарь записал фамилию так, как услышал, отбросив польское окончание.

По сословной принадлежности предки Хваржевых, скорее всего, относились к мелкой шляхте или к крестьянам западных губерний Российской империи (Волынская, Подольская, Гродненская губернии). Польская шляхта нередко носила прозвищные фамилии без дворянского суффикса -ский, а крестьяне получали фамилии от помещиков или от своих же односельчан. Второй вариант — фамилия могла возникнуть в среде крещёных татар или тюркских народов, где корень «хвар» мог означать «беда» или «горе» (ср. с осетинским «хвар» — «еда», но это маловероятно для русской адаптации). Однако польская версия выглядит убедительнее из-за характерного звукосочетания.

Встречаемость фамилии крайне низкая. Основная масса носителей живёт на юге России и в Краснодарском крае, что подтверждает миграцию из западных областей в XIX веке. Ударение, по аналогии с фамилиями на -ев, падает на первый слог: Хва́ржев. Разбор по словарю Б. Унбегауна не даёт прямого упоминания этой фамилии, но модель с польским корнем и русским суффиксом полностью укладывается в описанные им процессы адаптации польских фамилий.