Фамилия Скорцовы — яркий пример так называемых «птичьих» фамилий, образованных от названий животных, рыб или птиц. В данном случае основа — «скворец». В русских говорах, особенно северных и сибирских, слово «скворец» нередко произносили с заменой «в» на «р»: «скворец» превращался в «скóрец». Отсюда и пошло прозвище Скóрец, а затем и фамилия Скорцов. Человек мог получить такое прозвище за внешнее сходство с птицей (например, за пестроту одежды или быстрые, порывистые движения) или за манеру петь, свистеть. В некоторых диалектах «скорцом» называли и просто бойкого, вертлявого парня.

Модель образования типична для русской патронимии: суффикс -ов (в форме множественного числа — Скорцовы) указывает на принадлежность к роду человека по прозвищу Скорец. Это одна из самых распространённых моделей, поэтому фамилия встречается повсеместно, но с заметным сгущением в Поволжье и на Урале. В старых переписных книгах XVI–XVII веков можно найти упоминания крестьян и посадских людей с таким именованием, что говорит о её давнем бытовании среди непривилегированных сословий.

Интересно, что фамилия нередко записывалась через «а» — Скарцовы. Это не ошибка, а отражение «акающего» произношения, свойственного московскому и южнорусскому говору: безударное «о» звучало как «а». В документах XIX века можно встретить оба варианта написания, но в итоге закрепилась форма через «о», как более близкая к литературному произношению корня.

В отличие от фамилий, образованных от канонических имён (Иванов, Петров), Скорцовы несут в себе живое, бытовое прозвище. Их предок — не просто носитель имени, а человек с яркой, запоминающейся чертой, которую подметили соседи. Сравните с однокоренными Скоробогатовыми или Скороходовыми — здесь та же диалектная основа «скоро-» (в значении «быстро»), но в Скорцовых акцент смещён именно на птицу.