Прозвище Космогор, очевидно, получил человек, жившей неподалёку от Косматой горы. Слово «косматый» означает «лохматый, всклокоченный» или «густоволосый». Вероятно, в названии Косматая гора слово «косматый» употреблялось в переносном значении в качестве синонима выражения «поросший густой растительностью». Урочище, носящее название Косматая гора, есть в Брянской области. Однако топонимы Косматая гора могли встречаться на Руси повсеместно, поскольку подобные названия, указывающие на густоту или отсутствие растительности на холме, не уникальны: так, известно немало холмов, именуемых Лысой горой. Таким образом, в настоящее время не представляется возможным сказать, выходцем из какой именно местности был основатель рода Космогоровых. Таким образом, потомок человека, обладающего прозвищем Космогор, со временем получил фамилию Космогорова.