Прозвище Бильце восходит к украинскому нарицательному «бильця», что в переводе на русский язык означает «невысокое ограждение по краям лестницы, балкона, мостика». Так, предок обладателя фамилии Бильце мог быть плотником, который изготавливал красивые, резные перила.