Фамилия Жолтовская — женская форма фамилии Жолтовский, и её происхождение почти наверняка связано не с цветом, а с местностью. Вопреки интуитивному ожиданию, корень здесь не от слова «жёлтый» в прямом значении цвета. В основе лежит польское или западнорусское «żółty» (жёлтый), но в данном случае это могло быть прозвище или топоним. Чаще всего такие фамилии на -ский/-цкий давались по названию населённого пункта: в Польше, на Украине и в Беларуси есть несколько мест с названием Жолтов, Жолтово или Жолтовка. Предок носителя фамилии мог быть владельцем или жителем такого села, либо получить прозвище за светлые, «жёлтые» волосы — в славянской антропонимии это распространённый мотив.

Модель образования — типичная для шляхетских и дворянских фамилий Речи Посполитой, где суффикс -ский указывал на принадлежность к местности и часто имел социальную окраску. Носители такой фамилии в XVI–XVIII веках нередко относились к мелкой шляхте или служилому сословию. В России фамилия Жолтовский (и её женская форма) встречается в основном в западных губерниях — бывших территориях Речи Посполитой, а также среди потомков переселенцев. Встречается и вариант с одной «л» — Жотовский, но это уже иная ветвь.

Интересная деталь: в белорусском языке есть слово «жоўты» (жёлтый), и фамилия могла возникнуть как чисто прозвищная, без привязки к географии. Но в таком случае она была бы скорее Желтов или Желтовский. Наличие формы на -ский почти всегда выдаёт топонимическое происхождение. Таким образом, Жолтовская — это фамилия, которая говорит о географических корнях предка, скорее всего, из западнорусских или польских земель, и несёт в себе память о месте, где «жёлтое» что-то — поле, дом или речка — дало имя целому роду.