Фамилия Загарский образована от аналогичного прозвища, восходящего к топонимам Загарск или Загарское. Заграск – населенный пункт, расположенный в Бурятии. Загарское – сельское поселение в Кировской области. Так могли назвать выходца из Загарска или Загарского. Представители фамилии Загарских внесены в некоторые Памятные книги. Так, например, в Книге памяти Кировской области содержатся упоминания о Алексее Петровиче Загарском, родившемся в 1902 году в деревне Илемас Кировской области.