Die Hauptsehenswürdigkeit der Stadt Zvolen ist zweifellos das prachtvolle Schloss, das von 1370 bis 1382 von Ludwig I. von Ungarn erbaut wurde. Es unterscheidet sich stark von den Schlössern seiner Zeit und ähnelt eher einer italienischen Residenz. Im 15. bis 16. Jh. ließ Johann Thurzo Befestigungsanlagen hinzufügen, und 1548 wurde das Schloss um eine Etage erhöht und mit einer Attika bekrönt. Heute werden hier die außergewöhnlichen Sammlungen der Slowakischen Nationalgalerie aufbewahrt.