Скорее всего, фамилия Карзей представляет собой фонетический вариант фамилии Корзей, возникший под влиянием «акающих» говоров. Фамилия Корзей образована от прозвища Корзей. По одной из версий, оно восходит к восточнославянскому слову «корза» — «сварливая старуха». Поэтому, возможно, что Корзеем прозвали вспыльчивого, раздражительного человека. Согласно другой гипотезе, прозвище Корзей относится к так называемым «профессиональным» именованиям, содержащим указание на род деятельности человека. Исходя из этого, можно предположить, что основатель рода Карзей занимался пошивом верхней одежды. Веселовского упоминаются родственные прозвища и фамилии: Еремей Корзо, крестьянин, середина XVI века, Новгород; Корзан Григорий, 1624 год, Кострома. Таким образом, потомок человека, обладающего прозвищем Корзей, со временем получил фамилию Карзей.