Jame in brezna so kraški pojavi. Za njihov nastanek je poleg vode potreben še apnenec topen v vodi, ki ga na kostelskem ne manjka. Kostelske jame so po večini neraziskane, razen izjem, ki so si že pridobile mesto v katastru jamske zveze Slovenije. V občini se nahaja kar nekaj kraških jam: Kobilna jama pri Lobič mlinu, Mihova in Jelovička jama pri vasi Žaga, Lukova jama nad vasjo Podstene, Prepadna, Ledena in Kenina jama pri Suhorju itd. 
Na kostelskem je bila prva uradno zaznamovana in vknjižena Kobilna jama, in sicer leta 1930. V jamah so arheološka in paleontološka najdišča (npr. Lukova jama v dolini Kolpe - najdišče jamskega medveda, jamski lev…)
Vstop v jame je možen le v letnem suhem času, potrebna je naveza. Za obisk Kobilne jame potrebujemo primerno obutev in obleko, močnejšo svetilko, obvezna je zaščita glave.