Прозвище Граб восходит к польскому слову grabowy – «грабовый, сделанный из граба, относящийся к грабу». Возможно, прозвище Граб указывало на физическую силу основателя рода Грабовых или на его место жительства – близ некого граба или грабовой рощи. Таким образом, потомок человека, обладающего прозвищем Граб, со временем получил фамилию Грабов.