Рыжаком обычно называли человека с рыжими волосами.