根据史料记载，早在晋代就有僧侣在此地山下修行，并在这里开凿了南岩寺，距今已有1600多年历史。唐朝时，僧侣重修南岩寺，在石壁上开凿了石龛，初步奠定了南岩石窟的轮廓。直至北宋嘉定年间，佛像陆续被开凿、雕刻。此后的元、明清乃至民国时期都有僧侣对南岩寺的佛像进行修葺。

因此南岩石窟又称南岩佛洞、南岩寺，在历史上是座有名的古寺，后来逐渐衰败，不被人知。南岩石窟三面皆是红砂岩石，寺院伴随着石窟而修建，是座在自然洞穴中开凿而成的千年寺庙，有“中华第一佛洞”的美称。洞内宽度最宽有60多米，高度在30米左右，有30米深，占地面积约1800平方米，可以容纳上千人。

如今的南岩石窟保存着原始的样貌，没有华丽的建筑，也没有过多的装饰，石窟内的摆设十分简约。整个南岩寺共计13个石窟，目前被挖掘出来的只有4、5个，大部分石窟都未见天日，藏于山林之中。除了南岩寺的主殿之外，余下发掘的石窟内没有佛像、经文和壁画。南岩寺主殿石窟内保存的佛像石龛有40多座，都是在洞穴的石壁上直接开凿而成，石龛依托着天然巨岩排列成半圆形，石龛分为上下两层。

石龛内雕刻有释迦牟尼、文殊、普贤等佛像雕塑，石窟内的正中心的佛像是释迦牟尼佛，盘坐在石龛内，高2.5米，两侧还分布着罗汉、供养人佛像等。石窟内的佛像雕刻手法、凿刻风格与云冈、龙门两大石窟的风格类似，这在江南地带十分罕见。但是南岩石窟的单个洞窟比龙门石窟的规模还要大一倍，专家根据南岩石窟内的佛像衣饰、建筑样式等考据发现，南岩石窟比云冈、龙门两大石窟的修建时间接近。石窟外还有10多处摩崖石刻。

南岩石窟每尊佛像都惟妙惟肖，佛像本身的色彩已经无法取证了，部分佛像身穿“白衣”。在南岩石窟被发现、重视之前，这里是个存粮的仓库，极少有人对南岩石窟产生重视，为了防止食物受潮，会在洞内石壁上刷蹭白色物质，佛像也就因此沾染上这种白色。

南岩石窟龟缩在龟峰山一脚，山腰或者山脚处还能时不时看到小佛像，石窟的知名度并不大，几乎不为人知，但南岩石窟是我国最大的自然洞穴中开凿的佛教石窟。石窟的位置也较为偏僻，寺内的香火远没有山外的寺院那样繁盛，远离尘嚣，与世隔绝，大家对这方面感兴趣的，不妨可以来此一游。