Фамилия Зимагоровы хранит память о старинном народном прозвище Зимагор. В его основе лежит слово «зимогор» — так в некоторых славянских говорах называли человека, которому приходилось «горевать зимой», то есть бедствовать в холодное время года. Смысл прозвища напрямую связан с крестьянским бытом: после сбора урожая наступала долгая зима без полевых работ, и многие мужики отправлялись на заработки в города или соседние деревни. Их нанимали плотниками — строить суда, деревянные церкви, дома. Подрядчик собирал артель, а по окончании работы платил заказ. Но случалось, что плотник либо пропивал заработанное, либо его обманывали. Тогда он оставался на чужбине на всю зиму без денег и крова — «горе горевать». Отсюда и пошло меткое прозвище Зимогор. В диалектах это слово закрепилось и за тем, кто вообще не имел постоянного заработка.

Фамилия образована по стандартной модели: прозвище Зимагор (с заменой корня «зим-» на «зим-» под влиянием аканья или народной этимологии) плюс типичный русский суффикс принадлежности -ов. Суффикс -ов указывает на то, что фамилия сформировалась как отчество: «сын Зимагора». Встречаются и документальные подтверждения бытования фамилии. В начале XX века в записях значатся: Зимагоров Аким Никитьевич (1880 года рождения, деревня Журавка Западной области), Зимагоров Апат Карпович (1900 года, деревня Мартьяновка Минского округа), Зимагоров Тимофей Васильевич (1895 года, деревня Каменка Калининской области, русский). Эти записи показывают, что фамилия была распространена в нескольких регионах, но точное место её возникновения можно установить только при глубоком генеалогическом поиске.