Фамилия Бросиловский — одна из тех, где ударение на второй слог («Броси́ловский») почти наверняка указывает на географическое происхождение, а не на прозвище. В её основе лежит топоним — название населённого пункта Бросилов (или Бросилово). Такие сёла и хутора встречаются на территории исторической Волыни и Подолья (современная Украина). Человек, переселившийся оттуда, получал прозвище «бросиловский», то есть выходец из Бросилова, а его дети уже наследовали фамилию по отцу.

Суффикс -ск- в русских и польских фамилиях традиционно маркировал дворянский или шляхетский статус, но к XIX веку этот формант стал массовым: его давали крестьянам, мещанам и духовенству по месту жительства. Поэтому Бросиловский мог быть как потомком обедневшего шляхтича, так и крестьянином, записанным в ревизских сказках по названию родной деревни. Отсутствие в фамилии типичного русского суффикса -ов (Бросилов) или -ин (Бросиловин) — дополнительный намёк на западнорусские или польские корни.

Исходное слово «бросило» или «бросилово» могло быть связано с диалектным глаголом «бросить» в значении «оставить, покинуть»: так могли назвать пустошь, заброшенное поле или хутор, возникший на «брошенной» земле. Правдоподобнее, однако, что в основе лежит личное имя или прозвище Бросил (от «бросить» в смысле «освободить» или даже «разбросать»), а уже от него образовалось название села. В ономастике известен древнерусский антропоним Бросил, записанный в новгородских берестяных грамотах и псковских летописях (XIV–XV века), — это даёт фамилии глубину в несколько столетий.

Сравните с однокоренными фамилиями: Бросилов (более русифицированная форма), Бросиловцев (указание на жителя Бросилова), а также польские Бросиловски (Brosiłowski) — все они восходят к одному корню, но разошлись по разным сословным и региональным группам. Бросиловский — вариант, закрепившийся в основном в юго-западных губерниях Российской империи, где смешались славянские и польские традиции фамильного именования.