Ende des ersten Jahrtausends ist hier bereits eine Burg erwähnt. Das im Jahre 1666 erbaute Schloss erhielt nach einem Brand im Jahre 1727 sein heutiges Aussehen durch den Passauer Baumeister Domenico d'Angeli. Der Römerturm, der ehemalige Bergfried, ist der älteste Teil des Schlosses.