Фамилия Варганова образована от прозвища Варган. В свою очередь, оно восходит к нарицательному «варган» - старинный музыкальный инструмент (род губной гармоники), на котором играли скоморохи. Видимо, звучал он не очень хорошо, т.к. глагол «варганить» имел значение «плохо играть на чем-либо; шуметь, оглушать; что-либо наскоро, небрежно делать». Таким образом, прозвище Варган мог получить не только музыкант, скоморох, но и крикливый ребенок, а также торопливый человек. Прозвище Варган довольно древнее. Веселовского упоминаются: князь Никита Федорович Варган Палецкий, 1527-1540 гг.; Варфоломей Васильевич Варган Сабуров, вторая половина XVI в.; Иван Федорович Варганов, дьяк, 1616—1629 гг., Москва. Таким образом, потомок человека, обладающего прозвищем Варган, со временем получил фамилию Варганова.