Na okraji Hruboskalského skalního města se nachází zřícenina raně gotického hradu Valdštejn. Hrad byl zbudován na třech pískovcových skalách, původně propojených dřevěnými můstky. Ve středověku se stal načas oporou husitů a později také sídlem loupežníků. Hrad byl rodovým hradem pánů z Valdštejna. Značně poškozen byl po požáru koncem 16. století. Dnešní vzhled hradu je výsledkem barokních úprav v 19. století.
Kaple sv. Jana Nepomuckého v areálu hradu žije zejména v letních měsících pořádáním koncertů dobové hudby.
V hostinci na předhradí (hostinec již neexistuje) býval častým hostem hudební skladatel J.B. Foerster, slavná prvorepubliková herečka Antonie Nedošínská a mnoho dalších osobností té doby. Hrad je vzorně udržován a mimo vlastní prohlídky rozsáhlého areálu nabízí též prohlídky expozic a sezónních výstav. Zajímavostí je též údajný portrét K.H. Máchy v kapličce na prvním nádvoří.