Фамилия Желтоусов образована от прозвища Желтоус. Оно представляет собой сочетание прилагательного «желтый» со значением «цвета солнца, золота, рыжий» и существительного «ус». Таким образом, именование Желтоус можно трактовать как «желтый ус». Вероятно, прозвище Желтоус указывает на особенности внешности его обладателя. Так могли назвать того, кто имел светлые или рыжие волосы. Так и прозвище Желтоус закрепилось за человеком в качестве наиболее употребительного именования, а со временем легло в основу фамилии Желтоусов. Таким образом, потомок человека, обладающего прозвищем Желтоус, со временем получил фамилию Желтоусов.