Фамилия Вырвина в своей основе имеет прозвище или указание на место жительства. Наиболее вероятная версия связывает её с гидронимом или топонимом Вырва. В Житомирской области Украины есть село Вырва, а на «Атласе Днепра 1786 года» так называется остров в русле Старого Днепра. Название острова возникло после наводнения: проток отделил часть правого берега, «вырвав» из него участок площадью около 500 гектаров. Выходец из этих мест мог получить прозвище Вырва, а его потомки — фамилию Вырвин с типичным русским суффиксом принадлежности -ин.

Менее распространённая версия — от глагола «вырвать». В этом случае прозвище Вырва могли дать человеку резкому, отчаянному или тому, кто пережил потерю (как «вырванный» из привычной жизни). Однако географическая привязка выглядит убедительнее: она объясняет фамилию не единичной чертой характера, а целым родом, связанным с конкретной местностью.

Архивные записи подтверждают, что носители фамилии жили на западе и юге Российской империи. В Книге памяти Амурской области значится Вырвин Афанасий Григорьевич, родившийся в 1886 году в Белоруссии. А в Книге памяти Самарской области — поляк Вырвин Вацлав Иосифович, 1893 года рождения, уроженец Курляндской губернии. Оба случая показывают, что фамилия бытовала в разных социальных средах и не была привязана к одному сословию.