Die um 1204 von Herzog Ludwig I. gegründete Burg war bis 1503 Residenz des Wittelsbacher Teilherzogtums Niederbayern. Ab 1568 baute sie Erbprinz Wilhelm zu einem Schloss nach italienischem Vorbild mit zahlreichen Prunkräumen um.