Das Oberhaus, eine ehemalige Festung, wird Obere Burg (Veste Oberhaus) genannt. Die Festung wurde nicht nur zum Schutz vor Feinden gebaut, sie verteidigte auch die Bischöfe vor den Bürgern, die nach Freiheit strebten. Im Jahr 1822 wurde die Burg die bayerische Bastille und erst im Jahre 1932 kam sie in den Besitz der Stadt. Heute ist hier ein Museum untergebracht. Das Oberhaus kann man mit dem Bus oder dem Auto erreichen. Die meisten Touristen bevorzugen jedoch die Treppe von Ludwig, die aus hundertdreißig Stufen besteht, die in den Felsen am Ende des 19. Jahrhunderts geschnitten worden sind.
Die interessantesten Ausstellungen sind zu den Themen vom Salzhandel (Salz war das wertvollste Gut im Mittelalter), und der Geschichte des Handwerks. 130 Stufen der Wendeltreppe führen zur Aussichtsplattform, die eine außergewöhnlich schöne Aussicht auf die Stadt und den Zusammenfluss der drei Flüsse bietet.