I 1987 blev fængslet revet ned, primært for at forhindre at det skulle blive et nynazistisk valfartssted efter Rudolf Hess' død. Han sad alene i 20 år, efter at Albert Speer og von Schirach blev løsladt i 1966. For at sikre fængslets endelige fjernelse blev der lavet parkeringspladser og Britannia Centre Spandau på tomten, og alle bygningsrester endte i Nordsøen.