Фамилия Олзоева образована от бурятского имени Олзо, которое переводится как «находка, найденыш». Вероятно, это имя имело обрядовый характер и было призвано отвлечь злые силы от ребенка. В древности у некоторых народов бытовала традиция давать детям имена, подчеркивающие непричастность ребенка к данной семье: например, имена со значением «не наш», «приемыш», «найденный», «купленный». Считалось, что такие имена обманут злых духов, которые хотели бы причинить вред семье: якобы, духи, подумав, что ребенок чужой, не тронут его. Таким образом, человек, предка которого звали Олзо, со временем получил фамилию Олзоев. Фамилия Олзоевы встречается в различных исторических документах. Так, в Книге памяти Иркутской области отмечены буряты Олзоев Афанасий Иванович (родился в 1896 году, в Иркутской области, Аларском районе, в деревне Хадахан), Олзоев Владимир Баймеевич (родился в 1888 году в Бурятии, Аларском аймаке, в улусе Бунтуй), Олзоев Евгений Афанасьевич (родился в 1880 году в Иркутской области, Боханском районе, в улусе Нижний Ирхидей) и др.