Скорее всего, оно восходит к румынскому слову perj, которое переводится как «слива, сливовое дерево». Отсюда следует, что Пержой могли называть либо хозяина сливового сада, либо торговца сливами. Согласно другой гипотезе, прозвище Пержа этимологически связано с названием деревни Пержа, расположенной в Яранском районе Кировской области. В таком случае можно предположить, что основатель рода Пержа был выходцем из этого селения.