Местные жители, буряты, считают, что название это образовалось от слова "хурмээ", "хурбээ" - "дошли", "доехали", "прибыли". По преданию, ольхонские буряты, передвигаясь с запада к Байкалу через Прибайкальские горы, в этом месте дошли до берега озера, считая, что прибыли в назначенное место.