Средновековният замък е историческа забележителност на града и се намира точно в центъра му. Построен е от крал Луи I през годините 1360 - 1382 на мястото на оригиналния стар замък (Pustý hrad) от 12 век. като своя ловна хижа. Замъкът смени няколко собственици и беше седалище на един от най-мощните херцоги в Унгария Ян Йискра от Брандис, който дълго време работеше в Словакия и защитаваше интересите на фамилията Хабсбург във връзка с унгарския трон. През 1500 г. е собственост на фамилията Тюрц, която изгражда външните укрепления, а по-късно и артилерийския бастион. Замъкът постепенно претърпя допълнителни модификации и последният, ренесанс, практически остана до наши дни.
Той е национален паметник на културата и днес в него се намира Словашката национална галерия, тя е неговият аванпост. Това е най-богатата галерия от картини в Словакия. Галерията се състои от картини на художници от 14-ти до 19-ти век. а на приземния и първия етаж има изложба на различни видове изкуства, теми и стилове. Всяка година, през летния сезон, в двора на замъка се провежда театрален фестивал, наречен Игрите на замъка Зволен. Достъпът до замъка е много добър, тъй като той се намира в центъра на града и има платен паркинг точно до него. Повече информация за замъка, влизането и работното време можете да намерите ТУК.