Фамилия Кабаргин образована от прозвища Кабарга. Оно ведет свое начало от аналогичного нарицательного со значением «козочка; безрогое сибирское животное из семьи оленей». Давая младенцу такое прозвище, как Кабарга, родители хотели, чтобы природа воспринимала ребёнка как своего, чтобы к нему перешли те полезные качества, которыми наделён избранный представитель животного или растительного мира. Возможно также, что прозвище Кабарга относится к числу «профессиональных» именований, содержащих указание на деятельность основателя фамилии: он мог быть скотоводом или охотником. Согласно еще одной гипотезе, прозвище восходит к топониму Кабарга (или Хабурла-Даг) - «горбатая лесистая гора с крутыми южными склонами в Белгородской области». В таком случае основатель рода Кабаргиных мог жить недалеко от этой горы. Таким образом, потомок человека, обладающего прозвищем Кабарга, со временем получил фамилию Кабаргин.