Фамилия Кадомцевы — одна из тех, что прямо указывает на малую родину предка. В её основе лежит название посёлка городского типа Кадом, центра Кадомского района Рязанской области. Кадом — место с богатой и непростой историей: он впервые упомянут в Никоновской летописи в 1209 году. В XV веке Старый Кадом пришлось покинуть из-за разрушительных разливов реки Мокши, и новый населённый пункт отстроили южнее, на песчаных холмах. В середине XV века Кадом вместе с округой отошёл казанскому царевичу Касиму и до конца XVII века входил в состав Касимовского ханства. В Смутное время его захватывали польские интервенты, а с 1652 по 1764 год здесь действовал мужской монастырь. Статус города Кадом носил до 1926 года, а с 1958 года стал посёлком городского типа.

Суффикс -ев в фамилии Кадомцев указывает на модель образования, типичную для русских фамилий второй половины XVI–XVII веков: от названия местности через прозвище или именование по принципу «чей?». Кадомцев буквально означает «выходец из Кадома» или «человек, живший в Кадоме». Такая форма (с суффиксом -ев, а не -ский) говорит о том, что предок носителя фамилии был простого сословия — крестьянином или посадским, а не дворянином, получавшим фамилии на -ский.

Точное время возникновения фамилии Кадомцевы установить сложно: процесс формирования русских фамилий был долгим и растянулся на несколько столетий. Однако ясно, что родоначальник был уроженцем Кадома или долгое время там прожил, а затем переселился в другие края, сохранив в фамилии память о прежнем месте жительства.