У XVII столітті графи Штольберг уперше побудували тут фахверкову вежу. Це гарантувало хороший огляд навколишніх військових і торгових шляхів. 1768 року напівзруйновану вежу знесли з міркувань безпеки. 1834 року Граф Йозеф цу Штольберг-Штольберг (Joseph zu Stolberg-Stolberg) доручив проєктування будівлі нікому іншому, як прусському майстру-будівельникові й архітектору Карлу Фрідріху Шинкелю (Karl Friedrich Schinkel). Для зведення готичного подвійного хреста заввишки 26 м у довколишніх лісах було зрубано загалом 365 дубів. Фахверкову вежу, названу на честь її творця, було відкрито в день народження графа. Крест Йозефа незабаром став популярним туристичним напрямком у всьому регіоні. Однак вежа не була застрахована від негараздів погоди. Необхідність у реставрації виникла ще 1851 року, а в ніч з 11 на 12 червня 1880 року блискавка остаточно спалила дерев'яну споруду дощенту.
1886 року було засновано туристичний Харц-клуб, який 1896 року схвалив будівництво нової вежі, на що пішло 50 000 марок (приблизно 0.5 млн євро на 2025 рік). За проєктами Шинкеля було створено міцну залізну конструкцію, схожу на Ейфелеву вежу в Парижі, вагою 246 тонн.
У 2004 році було проведено велику реставрацію. Для найменших гостей облаштовано невеликий ігровий майданчик.
Є невеликий ресторан, де можна скуштувати смачні сосиски на грилі. На сам хрест можна піднятися 200 сходами (за окрему плату).
Як дістатися: парковка 51.587972, 11.012306, далі пішки. 1200 метрів через ліс, або 1600 метрів дорогою, яка здебільшого асфальтована, а тому можна з коляскою.