Фамилия Каразеева образована от прозвища Каразей. В его основе лежит нарицательное «каразея», которое имеет значение «реденькая и грубая шерстяная ткань, с косой ниткой, на подкладку под сукно». Вполне вероятно, что основатель рода Каразеевых был торговцем тканями или портным. Не исключено, что такое прозвище получил тот, кто носил одежду из каразеи. Таким образом, потомок человека, обладающего прозвищем Каразей, со временем получил фамилию Каразеева.