Szydłowiec zbudowano na złożach piaskowca, dlatego nazywany jest często "miastem na kamieniu". Taką nazwę nosi także ścieżka turystyczno-dydaktyczna, wiodąca piaskowcowym szlakiem przez miasto i okolice. O tym, że miasto rzeczywiście zbudowane jest na kamieniu, można się przekonać odwiedzając restaurację "Piwnica Szydłowiecka".  W sali z kominkiem widać, że jedna z jej ścian to lita skała piaskowca "in situ".  Tak więc piwnice szydłowieckiego ratusza sa pomieszczeniami wykutymi w litej skale.