Фамилия Скермонтов образована от прозвища Скермонт, которое восходит к двум литовским словам: skerius, что в переводе на русский язык означает «отдел, глава, часть» и monyti, то есть «разрастаться, разветвляться». Вероятно, прозвище Скермонт получил успешный, деловой, состоятельный человек, либо тот, кто занимал руководящую должность. Таким образом, потомок человека, обладающего прозвищем Скермонт, со временем получил фамилию Скермонтов.