Huis Berghorst werd in de periode 1944-1945 gebruikt door de hoogste autoriteiten van de SS in Nederland. De Befehlshaber der Waffen-SS en zijn staf vestigden hun kantoor in dit pand aan de Loseweg. Aan de achterzijde werd een schuilbunker gebouwd, die spoedig na de oorlog weer gesloopt is.