Прозвище Дурман происходит от названия растения дурман, которое известно своими опьяняющими свойствами. Поэтому прозвище Дурман могли дать сонному, вялому человеку, однако так могли называть и колдуна. Таким образом, потомок человека, обладающего прозвищем Дурман, со временем получил фамилию Дурманов.