东塔，名曰“龙兴塔”．南宋绍兴二十四年癸酉(1153)，泉州太守赵令衿造东洋桥成，乡人浙西转运使高惠连之后高仕舍地七亩造砖塔于桥头，曰，“龙兴塔”．其塔高准西塔，大倍之，腹大丈余，下层无级．左有昭惠庙，右慈济宫，后皆废．塔历年既久，风雨震暴，砖石剥落已甚，至万历三十四年丙午（1606)，塔尾坠，里人黄陈二氏醵金修理，铸葫芦尖以贯其顶．康熙三十四年乙亥(1695)四月二十日大雨，至五月初六辰时塔尽坏．从史料看，东塔倒塌迄今已历二百九—十八年之久，诚为可惜．东塔遗址（当在灰窑东北角），如今其四周，已由高楼大厦所代替。
西塔，名曰“瑞光塔”。南宋绍兴二十二年壬申(1152)，里人以造桥余资造砖塔于西桥头，曰：“瑞光塔”。后易名“文明塔”，俗称“白塔'。其塔呈六角形，共五层，高八丈余，径阔三丈余。每层均有六个塔檐，如雄鹰振翼欲飞。塔顶有一巨形葫芦，指向蓝天。旁西塔寺今已废。明万历三十四年(1606)、柱国太傅礼部尚书黄汝良倡修塔。清康熙五十八年(1719)重修塔尖。
“安海向是福建人文荟萃之区，代有才人。”明代登进士者21人，乡榜71人。唐宋时最著名的有名臣高惠连之殉宋难，直臣有安连济，理学有柯国材等。名溢古今者，有王慎中，乃明代二百年中杰出之才子。清代也有名噪一时之人杰，称雄于文苑艺林者，如黄物备之博古洽闻，黄居中之好学而藏书六万卷，蔡襄之词章，黄贞字之耿介旷达，黄伯善之孤标正洁。由是文风蔚起，儒彦辈出。故自明嘉靖九年(1503)至清道光十一年(1831)先后就有十四名中式乡贤点塔灯。是故，白塔，诚为瑞光耀彩，文明启运之塔也。清代诗人柯敦圃曾作诗咏塔曰：