Im 2. Weltkrieg ging das Ludwigsgymnasium "unter", zumindest das Haus in der Maxburgstraße. Die ersten Bomben trafen das Gebäude schon 1943, im Januar 1945 brach es nach einem Angriff völlig zusammen. Danach wurde das Gelände zwischen Lenbachplatz, Pacellistraße, Maxburg- und Karmeliterstraße geräumt - bis auf den Turm der Maxburg sowie Reste der Karmeliterkirche - und neu überbaut.