Фамилия Фрэзэ — редкий случай в русском ономастиконе, где иноязычная основа почти не изменила графику при заимствовании. В отличие от подавляющего большинства русских фамилий на -ов, -ин или -ский, Фрэзэ сохранила французское написание с акутом (é) и конечным -э, что сразу указывает на её нерусское происхождение и, скорее всего, на искусственный или книжный путь появления в России.

Наиболее вероятная версия — фамилия восходит к французскому слову fraise (клубника) или к глаголу fraiser (делать складки, гофрировать). В русской транскрипции XIX — начала XX века французское [ɛ] часто передавали через «э» (как в «кафе», «пенсне»), а финальное -e могло перейти в -э или -е. Таким образом, Фрэзэ — это транслитерация французской фамилии Fraize или Fraisé. Носитель такой фамилии мог быть либо потомком французских мастеров (ювелиров, портных, кондитеров), приглашённых в Россию в XVIII–XIX веках, либо обрусевшим иностранцем, сохранившим исходное написание.

Менее вероятна, но возможна связь с немецким словом Fräse (фреза, режущий инструмент). В таком случае фамилия могла принадлежать потомку немецких специалистов-металлистов, работавших на российских заводах. Однако написание с «э» и акутом (который в русском тексте часто опускают, но подразумевают) всё же сильнее тяготеет к французскому источнику.

Суффиксальная модель здесь не работает — фамилия не образована русским способом, а заимствована целиком. Это делает её «одинокой» в ряду однокоренных: нет ни Фрэзовых, ни Фрэзиных. Из-за редкости фамилия почти не встречается в исторических документах и сословных списках. Скорее всего, предки носителя принадлежали к городским сословиям — мещанам или купцам, имевшим дело с иностранцами, либо к семьям обрусевших европейцев, жившим в крупных городах (Петербург, Москва, Одесса). Географически фамилия не привязана к конкретному региону России, что подтверждает её «привозной» характер.