Фамилия Извольский восходит к топониму Извольск — село в Калужской области России. Сам топоним, предположительно, образован от диалектного нарицательного «изволье», которое в рязанских и владимирских говорах означало «привольная, раздольная местность». Вероятно, основатель фамилии Извольских родился или долгое время жил в населенном пункте под названием Извольск. В истории известен русский дворянский род Извольских. Он произошел от Василия Дмитриевича Извольского, который по преданию выехал из Польши в Москву во второй половине XV века. Елисей Яковлевич Извольский, прозванный Булгак, был воеводой в Дедилове, Викула Федорович являлся судьей разбойного приказа, думным дворянином, а Александр Петрович Извольский - представителем России при папском престоле. Род Извольских внесен в VI часть родословной книги Владимирской губернии.