戈林和鲍曼被盟军炸毁的官邸被列入第一批拆除的废墟。莫尔于1951年冬季来到上萨尔茨堡时注意到废墟旁边停了几辆卡车，有些人正在往卡车里铲装碎石砖。“以这样的方式拆除拥有一段显赫历史的建筑显得有些虎头蛇尾，”莫尔写道，“然而实际情况是大部分废墟极不结实稳定，不需要爆破。只要把它们推倒，捡起来装车运走就行了。”在此之前进行的有关争论中，双方考虑到废墟结构上的潜在危险状况，政府不得不花费一大笔公共资金对游客安全负责。很难想象一个新兴民主国家在努力克服灾难性的世界大战造成的劫难、努力医治残存的法西斯创伤的同时，还能同意花费资金来维护希特勒及其心腹密友遗留下来的旧居废墟。无论如何，那些废墟已经严重破败，有人甚至质疑是否还能把它们保存下来。美国国务院官员艾弗里特·舒宁对莫尔说：“那些废墟必须拆除……成千上万游客在那里爬上爬下很不安全——在空袭中没有被炸毁的部分非常不稳定，摇摇欲坠。”

为了给纳税人节省清理废墟的费用，巴伐利亚政府把回收废墟建材的权力卖给了当地一家建筑公司，并附加了一个严格条件：不许把回收的任何材料当作纪念品转售出去。除了处理废墟以外，这家公司还同意拆除与纳粹政权有关的大量建筑，包括希特勒曾在其中撰写《我的奋斗》第二卷的“奋斗木屋”。所有这些工程必须于1952年5月完工。随后要在原址上重新植树绿化，总费用约为10万德国马克。由于担心新纳粹分子抗议，霍格纳在拆除现场布置了30名警察，以“保卫民主成果”。冬季停工，第二年春季继续开工。到4月末，工作人员几乎已将贝格霍夫别墅遗址拆除完毕。最后要拆除的就是别墅正面大墙，那里曾经矗立着面对翁特斯伯格的那扇巨窗。毫无疑问，它也是整个别墅最具象征意义的部分。4月30日在希特勒自杀七周年，几乎与希特勒当年自杀同一时刻，贝格霍夫别墅剩余墙体被爆破拆除。当时曾详细记录了整个过程的《贝希特斯加登广告商报》抱怨道，在离爆破拆墙仅仅还有两小时的时候才发布有关消息。该报记者匆匆赶往别墅遗址，发现一小群美国官员和巴伐利亚政府代表早已聚集那里观看爆破。为了再现这次国家级爆破行动，记者把别墅废墟的最后时刻分分秒秒地记录下来，直到下午5点5分炸药引爆，“只见一团褐色的烟尘笼罩在爆炸现场上空，持续了几分钟”。爆炸现场随后由美国和德国政府官员负责进行了复查。贝格霍夫别墅正面墙体爆破拆除的照片在全世界发布，对于许多观者而言一定有着宣泄情感的作用。正如《生活》杂志所说的那样，“希特勒时代及其结局在贝格霍夫别墅那里得到了印证”。为了纪念这次爆拆行动，《生活》杂志以今昔对比的形式刊发了一组贝格霍夫别墅照片，使人回想起别墅当年盛况与今日消亡的结局。曾经大量报道过贝格霍夫别墅的《纽约时报》指出：“希特勒那焦躁不安的鬼魂不得不另外再寻找一个出没之处了。”

如果说希特勒的鬼魂在贝格霍夫别墅遗址被爆炸拆除以后出走别处，游客们却仍然故我，照来不误。使当地商人感到高兴的是，在上萨尔茨堡纳粹废墟有争议地被拆除之后几十年里，游客人数一直稳步增长。尽管美国拆除搬运协议规定所有纳粹建筑痕迹一律消除，但是负责拆除废墟的那家建筑公司还是留下了地基与其他地下结构，包括希特勒的车库。这些留下来的建筑部分，连同庞大的地堡和鹰巢（后作为餐馆重新对外开放）一起吸引着具有历史好奇心的游客来到这个地方观光旅游。前往上萨尔茨堡的车辆人流络绎不绝，原打算在被清理完毕的废墟原址上种草绿化以掩盖纳粹建筑痕迹的计划也受到影响。即使在大部分建筑结构消失之后，贝格霍夫别墅废墟仍然是德国无须广告宣传的最大旅游景点，吸引着数十万游客前来观光。1962年，德国《明镜》记者彼得·布鲁格把卸客的公共汽车以及在废墟地基上沉思不语的人群比作庞贝古城旅游盛况的再现。

纳粹废墟被拆除后，有关上萨尔茨堡的报道大幅度减少，但是接下来的40年里，德国媒体与国外媒体偶尔刊发的有关报道提醒人们：对历史的记忆以及历史遗址问题并不会随着贝格霍夫别墅废墟的爆炸拆除而随之消失。除了游客以外，有些纳粹同情支持者也来到别墅废墟原址上，留下了他们顽固存在的身影。随着新纳粹主义日益被视为一种全球现象，这些纳粹朝圣者不再仅限于德国人。布鲁格曾经记叙道，他一到达上萨尔茨堡就走进希特勒的车库，看到墙上用英语写着“希特勒是对的”这句话。这可能是某位外国游客带着一罐事先准备好的油漆来到此处涂写的。研究比较缺乏，再加上当地优美的自然风光，使昔日那段历史有待重新挖掘。游客们在鹰巢露天平台上喝着豪夫啤酒，陶醉在蓝天和优美山景之中，很容易不知不觉地赞叹希特勒颇有审美眼光。周围的一切是那么赏心悦目，很难使人想起鹰巢是建立在人类痛苦之上的。无论如何，这里明显缺失一些提醒人们不要忘记过去的事物。上萨尔茨堡纳粹废墟遗留下来的那部分除了锈迹斑斑的“请勿靠近”警示牌以外，再没有任何官方标志。由于政府一再表示没有留下任何可看的东西，所以也没有官方组织的旅游活动。但是自由职业导游们则根据他们以为游客想听的内容组织旅游活动。布鲁格采访过的一位导游声称，他既不赞扬也不批评希特勒，只是尊重事实。“我组织的旅游必须客观不带偏见，”他坚持宣称，“我不能说‘希特勒那个杂种曾经在那里住过’，人们不想听到这样的话。”该地区出售纪念品的商店店主在卖货时也表达了相同的态度。纪念品包括那些当地推出的对山区纳粹历史作过删节处理的图书。图书内容以20世纪30年代宣传材料为基础，重新采用了同时期拍摄的一些照片，将当年纳粹在上萨尔茨堡的活动再现为有益健康、大部分同政治无关的娱乐活动。翻开这些出版物可以看到，希特勒在贝格霍夫别墅露天平台上放松休息、戈林在结冰的水池上玩冰上溜石游戏、爱娃·布劳恩在晒日光浴等单纯的日常生活场面。出售纪念品的摊位上还卖一些1945年以前和拆除纳粹遗址之前制作的明信片、彩色幻灯片。1986年，当地社会民主党驻巴伐利亚州议会代表彼得·库茨抱怨说这些纪念品带有怀旧色彩，引起不小轰动。每当有带着明显政治内容的材料可供销售时，总是以脱离上下文语境的方式呈现出来。1978年，有位去上萨尔茨堡观光的游记作者惊讶地发现，一些店主向游客展示希特勒和戈培尔的演讲录音，放在平克·弗洛伊德与普拉斯提克·贝特朗的唱片旁边。

虽然政府当局偶尔取缔一些比较令人难堪的纪念品，上萨尔茨堡还是普遍可见放任自由的经营状况。土耳其旅馆老板色雷斯·帕特纳利用宽松的经营环境招徕游客参观贝格霍夫别墅地堡系统。卡尔·舒施特的女儿帕特纳曾经同为数不多的上萨尔茨堡原有居民一起要求归还当年被鲍曼夺去的房地产，最终如愿以偿。通向地堡系统的入口先是被美国占领军封死，后来于20世纪50年代初期又被巴伐利亚当局封死。帕特纳声称，1954年一个梦境引导她走到旅馆下面一扇被堵住的大门前面。门一打开，她发现有一条长长的地道直通邻近的贝格霍夫别墅下面希特勒和爱娃·布劳恩的地堡房间。随后她便开始招徕游客，从每年游览地堡的5万名游客那里发了一笔横财。她偶尔粉刷的地堡墙壁变成了表达亲纳粹和反纳粹情感的涂写画布。1966年，为了回应“贝希特斯加登利用希特勒遗迹赚钱”的投诉，巴伐利亚财政部长下令封闭贝格霍夫别墅地堡。这一罕见的干预行动立即成为美国各大报纸头条新闻。然而舒施特一家人继续向游客售票，让他们参观游览通过其旅馆可到达的地道及地堡房间。