Фамилия Брезовская образована от прозвища Брезовский. Оно же, скорее всего, восходит к названию города Брезово, расположенного в Пловдивской области Болгарии. Не исключено также, что прозвище связано с названием деревни Бржезово, которая находится в Лиозненском районе Витебской области Белоруссии. Сами топонимы, предположительно, просиходят от болгарского слова «бреза» или польского brzoza, что переводится как «берёза». Таким образом, вполне вероятно, что основатель рода Брезовских когда-то являлся владельцем имений в одном из этих мест. В исторических документах упоминается дворянский рода Брезовских, записанный в VI часть родословной книги Смоленской губернии. Представители этого рода в разное время занимали высокие государственные посты. Герб рода Брезовских внесен в Часть 5 «Общего гербовника дворянских родов Всероссийской империи».