Фамилия Каргова образована от прозвища Карго, и у этого прозвища, скорее всего, было несколько источников. Самая прямая версия — от слова «карга» в значении «железная скоба с острыми концами, которую забивают в бревно». Такое прозвище мог получить плотник или строитель, который работал с этим инструментом. Это объяснение кажется самым надёжным, потому что оно указывает на конкретное ремесло.

Но есть и другие возможности. В северных говорах, особенно архангельских и олонецких, «каргой» называли топкое, болотистое место в лесу. Если предок жил у такого места, прозвище могло закрепиться за ним по месту жительства. Третья версия — диалектное «карга» в значении «старуха». Это менее вероятно для мужского прозвища, но полностью исключать нельзя: иногда прозвища давали по внешнему сходству или поведению, не связанному с возрастом.

Суффикс -ов- типичен для русских фамилий, он указывает на принадлежность: «чей?» — Каргов, то есть сын или потомок Карго. Женская форма Каргова — это вариант по линии жены или дочери, но в современном употреблении она закрепилась как фамилия по женской линии.

Слово «карга» многозначное, и все его значения — из народной речи. Ни одно из них не связано с тюркскими или иными заимствованиями, корень исконно славянский. Поэтому фамилия Каргова — чисто русская, северного или северо-западного происхождения, с прозрачной, хоть и разветвлённой этимологией.