Dnešní místo Čertovy skalky původně oplývalo množtvím tajemných skal, které se obyvatelům blízké obce zdály přímo pekelné a proto ho pojmenovali Čertův Hrádek.

Později se zde začal těžit kámen křemenec a ze skalních stěn zbyla dnešní Čertova skalka.  

Pod Čertovou skalkou najdete i tzv. Létající klacky – unikátní konstrukci tvořenou dřevěnými kůly, které jsou zavěšeny na ocelových lankách a jakoby levitují v prostoru. Konstrukce nese kouřovod odvádějící kouř a jiskry ze zdejšího venkovního ohniště.