Имя Ульяша является народной формой канонического имени Юлиан, что в переводе с латинского на русский язык означает «принадлежащий к роду Юлиев» или «кудрявый». Одним из покровителей этого имени является мученик пресвитер Юлиан Галатийский. Святой жил во времена царствования Диоклетиана (IV век от Рождества Христова). Он скрывался с 40 другими христианами в одной из пещер близ города. О его проповеднической деятельности донесли правителю Галатийской области Антонину. Антонин приговорил старца к мучениям. По его приказанию Юлиану велели взойти на раскаленное ложе. Но явившийся по его молитве ангел Господень остудил пламя и сохранил мученика от лютой смерти. Святого Юлиана иссекли мечами, и его душа отошла к Господу. 40 христиан по гласу Божию пришли к месту его последних мук и нашли его тело. Поэтому Ульященко буквально понималось как «сын Ульяши».