Основой фамилии Вытовтов послужило имя Витовт. Фамилия Вытовтов, вероятно, ведет свое начало от мужского имени Вытовт, белорусского варианта древнего литовского имени Витовт. Оно, возможно, происходит от древнего названия жреца – «витавит» (в переводе с санскрита – «тот, кто знает веды»). Пожалуй, самым известным в истории носителем имени Витовт является Витовт Великий (1350-1430), великий князь Литовский, сын Кейстута, двоюродный брат Ягайло. Одно из первых документальных упоминаний родственных именований относится к XV веку. Так, в «Ономастиконе» академика Веселовского записан крестьянин Якуш Витовт из Новгородского уезда, 1498 г.; Витовтовы из Ярославля, XVI в. Таким образом, потомок человека, обладающего именем Вытовт, со временем получил фамилию Вытовтов.