Die Burg wurde unter den bayersichen Herzögen Albrecht I. und Ludwig dem Gebarteten im 14. bzw. 15. Jahrhundert zu einer bedeutenden Landesfestung ausgebaut. Im 17. Jahrhundert erlebte das mächtige Hochschloss mit dem imposanten Burgfried seine Hochblüte. Durch verheerende Brände in den Jahren 1724 und 1775 wurde das Schloss fast vollständig zerstört und nicht mehr aufgebaut.

Schlosspark: ehemaliger Burghof, seit 1895 zu einer Parkanlage umgestaltet. Der 26 m tiefe Brunnen wurde 2003 wiederentdeckt.