Фамилия Жолудовы (в документах чаще встречается в форме единственного числа — Жолудов) образована от мирского имени Жёлудь. В дохристианской и раннехристианской традиции такие имена давали ребёнку не случайно: родители верили, что назвав малыша Жёлудем, они передадут ему качества этого плода — крепость, стойкость, твёрдость. Считалось, что природа будет воспринимать такого ребёнка как «своего» и защитит его.

Фамилия построена по самой распространённой русской модели: к основе Жолуд- (народный вариант произношения слова «жёлудь») добавили суффикс -ов, указывающий на принадлежность. То есть Жолудов буквально означал «сын (или потомок) Жёлудя». Интересно, что в разных говорах слово «жёлудь» произносили по-разному: где-то с ударением на первый слог, где-то на второй, и звучание могло быть как «жолудь», так и «жолодь». Отсюда — варианты фамилии Жолудов, Жолудовский, а также Жолобов (хотя у последнего может быть и другая основа).

О точном месте и времени возникновения фамилии говорить сложно: процесс становления русских фамилий шёл несколько столетий, и Жолудовы могли появиться независимо в разных регионах. Однако можно предположить, что прозвище Жёлудь чаще давали человеку невысокого роста, коренастому, либо, наоборот, скупому (по ассоциации с твёрдым, «крепким» орешком). В старорусских документах встречаются упоминания крестьян и посадских людей с таким именем-прозвищем — значит, предки Жолудовых были, скорее всего, не из знатных родов, а из свободных земледельцев или ремесленников.

Фамилия Жолудов — живой след народной культуры и языка, где обыденный предмет или явление становились именем, а потом и родовым знаком на века.