Cserépváralja − erdők koszorúzta hegyek gyűrűjében − a valamikori Cserép-várról kapta nevét. A várnak (XVI. sz.) ma már csak falmaradványai láthatók. A Bükkalja településein használt barlanglakásoknak állít emléket itt a tájház (Dobó út 4.). A könnyen faragható vulkáni tufába vájt barlanglakások, pinceházak többnyire szőlőbirtokosok tulajdonában voltak, csak a XX. században váltak a szegények otthonaivá.
Ma már a különleges (padlófűtéses, berendezett konyhás, fűthető) szálláshelyeket kedvelők vehetik ezeket bérbe.