Gegenüber der Passauer Altstadt liegt 100 m über dem Tal die Festung Oberhaus, das militärische Zentrum des Fürstbistums Passau. 1219 um eine noch vorhandene Kapelle errichtet wurde sie fünfmal erfolglos belagert, darunter zweimal von Passauer Bürgern, die ihren Zwingherrn abschütteln wollten. In den Verliesen saßen in den Wirren der Reformationszeit viele Mitglieder der Täuferbewegung unter schlimmen Bedingungen ein, etwas besser hatten es die politischen Gefangenen in der bayrischen Militärstrafanstalt bis 1918.
Heute beherbergt die Veste Oberhaus das Oberhausmuseum, das die Geschichte der Stadt Passau erzählt und Einblicke in mittelalterliches Leben, Wohnen und Arbeiten gibt. Von der Batterie Linde aus hat man den schönsten Blick über die drei Flüsse Donau, Inn und Ilz.