巾山塔群位于巾山之间，一山四塔，实属少见，2019年10月新晋全国重点文物保护单位，由东大塔、千佛塔、南山殿塔组成。

巾子山西麓有千佛塔，是全国重点文物保护单位，是临海现存最高大的古塔，也是台州地区现存唯一的元塔。塔七级六面，其内中空，从第一级开始，每级都做有一个壶门;从第二级开始，每级每面除壶门外均做有壁龛。塔始建于唐天宝三载(744)，初称龙兴寺塔，后称多宝塔。现存塔身系元大德三年(1299)重建，因塔的各面面砖和壁龛上均刻有佛像1003尊，故称千佛塔。其比例准确，造型精美，艺术水平相当之高。这在我国历代的古塔中是不多见的，在我国现存的古塔中，就更是凤毛麟角。

巾山双峰矗立有东大塔与西小塔，合称为大小文峰塔。始建年代无从考证，南宋嘉定间（1209－1224）已有此双塔，明正德年间，塔外表的木构部分被火烧毁。清咸丰年间两塔完全毁圮，现在的双塔是同治四年（1865）台州知府刘璈命庠生大田赤水人徐万年等重建，并改为砖面结构，五级六面。据传，这大小文峰塔，有阴阳之分，大为阳、小为阴，两者朝夕相伴，和睦相处，象征着吉祥、安乐，对未来充满希望。

位于千佛塔以南的山坡之上的南山殿塔，与南山殿佛门相映，形式、结构均与双塔相似，传此塔是为纪念唐玄宗时抵御安禄山死守睢阳城的张巡元帅而建。