Фамилия Швем образована от прозвища, которое восходит к нижненемецкому глаголу swemmen - «плавать», «сплавлять». Так, основатель рода Швем мог сплавлять лес по реке. Не исключено, что он был хорошим пловцом. Существовало и существительное swem(me), образованное от того же глагола: так называлось глубокое место на реке, через которое переправляли скот. Следовательно, Швемом могли называть человека, жившего рядом с этим местом. Также не исключено, что Швем — польская фамилия, образованная от того же немецкого корня.