Von 1512 – 1515 ließ Jakob Fugger der Reiche am damaligen Weinmarkt, der heutigen Maximilianstraße, ein einheitliches Gebäude errichten. Weitere angrenzende Häuser wurden ab 1517 in den Komplex des Stadtpalastes integriert. Hier logierten die Kaiser Maximilian I. und Karl V. sowie Künstler wie Tizian und Dürer. Der herrschaftliche Gebäudekomplex befindet sich heute im Besitz des Fürsten Fugger-Babenhausen und wird im Damenhof und Fuggerkeller gastronomisch von den Brüdern Schiemann genutzt. Das Angebot in dem Gewölbekeller reicht von einer Tapas-Bar, über ein Restaurant bis zu einer modernen Lounge und einer Club-Bar.