Фамилия Вытегоровы — классический пример «географической» фамилии, где в основе лежит название места. Корень здесь — Вытегор (или Вытегра), а суффикс -ов указывает на принадлежность: «чей?» — «вытегоров», то есть потомок человека из Вытегры.

Вероятнее всего, родоначальник Вытегоровых был выходцем из города Вытегра (ныне райцентр в Вологодской области) или с реки Вытегра, на которой этот город стоит. Такие фамилии давали переселенцам: когда человек переезжал в другую местность, его прозывали по прежнему месту жительства, чтобы отличить от местных. Сын такого переселенца и записывался как Вытегоров.

Сама основа — Вытегор — это усечённая форма от «Вытегорский» или «вытегорский житель». В русской ономастике топонимические фамилии часто образовывались именно так: от названия города без суффикса -ск, но с патронимическим -ов. Сравните: Тверитинов (от Тверь), Ростовцев (от Ростов), Муромцев (от Муром). Вытегоров стоит в том же ряду.

Интересно, что в дореволюционных источниках эта фамилия встречается в основном на Русском Севере и в Прионежье — то есть в регионе, откуда она и пошла. Встречается она нечасто, что типично для фамилий, привязанных к небольшому городу, а не к обширной губернии. Если ваши предки носили эту фамилию, высока вероятность, что их корни — из Олонецкой губернии или Вологодчины.

Написание «Вытегоровы» — форма множественного числа, принятая для обозначения рода. В единственном числе фамилия звучит как Вытегоров (мужской род) и Вытегорова (женский). Ударение, скорее всего, падает на первый слог: ВЫтегоровы, как и в названии города Вытегра.