Зальцбургский архиепископ Гебхард велел построить его в 1075–1078 годах, во время борьбы за инвеституру, как одну из трёх крепостей, охранявших путь вдоль Зальцаха от короля Генриха IV; другой был Хоэнзальцбург в городе, и потому эти две крепости считаются сёстрами. Гебхарда изгнали в 1077 году, он вернулся в 1086 году и умер в Хоэнверфене двумя годами позже.

Веками князья-архиепископы использовали замок как военную базу, резиденцию и охотничий дом, а также как государственную тюрьму с мрачной репутацией. Архиепископ Адальберт III содержался здесь в 1198 году, штирийский наместник Зигмунд фон Дитрихштейн (Siegmund von Dietrichstein) — в 1525 году; князь-архиепископ Вольф Дитрих Райтенау провёл здесь в заключении шесть лет и умер в 1617 году. Восставшие крестьяне и горняки подожгли замок во время Крестьянской войны 1525 и 1526 годов, а ещё один пожар повредил его в 1931 году. При нацистах с 1939 года здесь размещалась партийная школа, а после войны, до 1987 года, здесь обучалась австрийская жандармерия. Замок принадлежит земле Зальцбург.

Сегодня замок действует как музей, а классическая экскурсия с гидом проводит по стенам и коллекции оружия. В старом арсенале размещены две выставки: Burgzeiten прослеживает историю замка и то, как вокруг него менялись жизнь и общество, а Der Aufstand рассказывает о Зальцбургской крестьянской войне 1525/26 годов с помощью мультимедийных экспозиций. Другие залы посвящены истории строительства замка и съёмкам военного фильма 1968 года «Где орлы осмеливаются» (Where Eagles Dare), в котором Хоэнверфен сыграл вымышленный Schloß Adler.

Частью посещения являются и хищные птицы. Австрийский музей соколиной охоты рассказывает об истории и практике соколиной охоты, а на показательных полётах сокольники выпускают орлов, соколов, ястребов и грифов. Еда подаётся в Burgschenke — во дворе замка в хорошую погоду и в Рыцарском зале (Rittersaal) в дождь; в стенах замка проходят также летние киновечера и детский праздник.