Фамилия Ворожбит — один из тех случаев, когда прозвище предка прямо говорит о его занятии. В основе лежит слово «ворожба», то есть гадание, заговоры, колдовство. Первый Ворожбит, скорее всего, был знахарем или колдуном: лечил травами, читал заговоры, прибегал к магическим действиям. Слово «ворожить» имело и вторичное значение — «гадать, колдовством способствовать удаче», так что предки Ворожбитов могли заниматься и предсказаниями.

Интересна народная этимология, связывающая ворожбу с «ворогом» (врагом, дьявольской силой). Отсюда же и «ворожейка». Но лингвисты считают эту версию скорее поздним осмыслением: корень общеславянский, родственный литовскому vargas — «беда, нужда», и изначально означал магическое действие, а не призыв «вражьей силы».

Фамилия образована без суффикса — по модели «профессия + нулевое окончание», как Кузнец, Плотник, Скоморох. Такие фамилии редки: обычно их давали либо в среде казачества, либо в украинских и белорусских землях, где нулевая суффиксация встречалась чаще, чем в великорусских говорах. Поэтому географически Ворожбиты тяготеют к юго-западу — к Украине и югу России.

В документах фамилия встречается с XVII века. В реестре Войска Запорожского 1649 года упоминается казак Ворожбит, что подтверждает: носители фамилии были не просто знахарями, но и служилыми людьми. Позже, в XIX веке, Ворожбитов можно встретить среди крестьян Курской, Харьковской и Воронежской губерний.