Фамилия Баберя образована от аналогичного мирского имени, которое восходит к белорусскому «бабер» - «бобер». Так могли прозвать человека за цвет волос, сходный с цветом бобрового меха.