Согласно одной из версий, в его основе лежит слово «гуза», то есть «задняя часть лодки». Однако в некоторых говорах Гузом называли мешковатого, медлительного и нерасторопного человека. Согласно другой гипотезе, это прозвище связано с существительным «гуж», то есть «ремень, с помощью которого оглобли прикреплялись к хомуту».