Фамилия Кадомский восходит к названию поселка городского типа Кадом, расположенного на обоих берегах реки Мокша. Кадом известен с 1209 года (впервые упоминается в Никоновской летописи). В XV веке Старый Кадом был покинут жителями вследствие разрушительных разливов реки Мокши; новый населённый пункт был основан на песчаных холмах в 6 км южнее, где была построена Кадомская крепость. В середине XV века Кадом с округой был отдан в удел казанскому царевичу Касиму и до конца XVII столетия находился в составе Касимовского ханства. В Смутное время Кадом был захвачен польскими интервентами. В 1652—1764 годах здесь существовал мужской монастырь.