Многие из них происходят от слов, означающих природные явления, небесные тела, растения. Фамилия Келпш, вероятно, имеет польско-латышское происхождение. Предположительно, она ведет начало от прозвища Келпш, которое является вариантом польского прозвища Килб, адаптированного прибалтами с помощью окончания существительных -ш. Само прозвище Килб восходит к польскому слову kiełb — «рыба-пескарь». Возможно, такое прозвище получил рыбак или же человек, чем-либо напоминавший пескаря внешне или по поведению. Фамилия Келпш могла сформироваться в период существования Речи Посполитой — польско-литовской унии, когда контакты между балтами и славянами были особенно интенсивны. По другой версии, прозвище Келпш восходит к германской основе kalp – «теленок» и указывает на род занятий предка — скотоводство. Последние образуются двумя способами: у девушек – от основы фамилии отца с помощью суффиксов –айт-, -ут-, -ют- и окончания –е, а у замужних женщин – от основы фамилии мужа с помощью суффикса –ен- и окончания –е. Представители фамилии Келпш упоминаются в различных архивных источниках. Так, из Книги памяти Омской области известен польский рассыльный малярийной станции Стефан Зенонович Келпш, родившийся в 1874 году в местечке Радзивилишки Ковенской губернии Польши и проживавший в Омске. Из людей, прославивших фамилию Келпш, известен советский военный инженер и ученый, генерал-майор Валентин Валентинович Келпш (1937– 2000), Герой Социалистического труда.