A város legendás várában 1382-ben Nagy Lajos országgyűlést tartott, majd Giskra székelt, akitől Hunyadi Mátyás foglalta vissza. A vár, ami sose volt török kézen, de az erdélyi fejedelmek többször is elfoglalták. Ahol 1620-ban a Szent Koronát őrizték. Ami a kuruc harcokban többször is gazdát cserélt, majd az Esterházy családé lett. Később a kincstár, majd a csehszlovák állam birtokolta, ma meg képtárnak ad helyet.
A vár alatti téren terül el Zólyom városa. A csehszlovák idők emlékei, a panelek tömbjei között a sétatér valamit még megőrzött a Királyság idejéből. Mert bőven van mire emlékezni. Például 1244-re, amikor IV. Béla királyunk kiváltságokat adományozott a településnek. A város sokáig a huszita hadak központja volt, majd Mátyás király alatt nyerte vissza régi fényét.
A Szent Erzsébet-templom már 1390 óta hirdeti a fő téren a Mindenható dicsőségét.