风水塔有镇邪塔和文风塔之分。如遂昌湖山的钟秀塔，民间传说两个山头下有精怪，会在夜里相会，导致两山汇合，河水漫溢，损毁田舍。因此，地方上在山顶建塔镇住了精怪，使两山不能再汇合，保护了一方的安宁。遂昌县城的双峰塔属文风塔，建塔是为改善本地风水，振兴地方文风。

　　关于双峰塔的位置，清代《遂昌县志》记载：“塔山，在瑞山东，上有土鼓坛。宋知县朱元成因西有尖山为文笔峰，因建塔於山曰‘双峰塔’。与尖山对峙，为邑治屏障。下有潭曰‘塔潭’。”塔山即今县城叶坦桥头的山，古时山上有土鼓坛，也称“土鼓山”。清康熙《遂昌县志·形胜》记载：“环邑山倍於水，左有土鼓之异，右有文笔之奇，瑞山屹其前，兑谷拥其后，白马蜿蜒，飞鹤廻翔，两溪夹流，一水东会，乃栝西一名区也。”土鼓坛被列为古时遂昌的环邑十二景之一“土鼓含音”。明弘治十年(1497)遂昌贡生郑还有诗：试敲石鼓响声奇，疑是宫商落翠微。好看最宜春日暖，儿童竞击笑忘归。

　　清道光年间，遂昌知县朱煌有诗：石鼓传周史，坡仙也作歌。谁知山下土，搏击类鸣鼓。

　　诗文说山上有石，敲之响声如鼓，因名“土鼓坛”。而自从建了双峰塔，此山又名“塔山”，山下的南溪中有一深潭叫“塔潭”。