古时，这里有一眼圣洁的泉水，喷琼迸玉，神膏毕沸，人们见了无不喜爱。传说来此朝拜的人们，还可在天光云影之际，或者看到飘飘欲来的天仙，或者看到杖锡而至的沙门，或者看到朵朵盛开的花朵...所以，人们以为这一清澈见底的玉液琼池是菩萨沐浴之所。因此，来此瞻礼灵池的人们，在盛夏酷署之时，就拿香花，拭巾投入池中，让菩萨沐浴净身。後来，在寺旁边新建了一座布局严谨的，雕梁画栋的梵宇琳宫，名之「万圣澡浴池」。入清之後，灵泉水曾断。现在，涌泉依然，只是水位下降了许多，且用石头砌为水池了。现又重建大殿三间，单檐，四阿顶，内供「三大士」和释尊师徒三人，还有精雕细刻的文殊脚印石刻，供人瞻礼。
澡浴池现存古迹是一座古文殊洞，洞内佛像皆有千年之久。原有5洞，由于天灾崩塌，两侧所供大势至菩萨，地藏王菩萨被毁。现供有木质三大士像，左洞普贤菩萨，中洞文殊菩萨，右洞观音菩萨。文殊菩萨法像下有一块石头，上面留有一只清晰可辨的手印，传闻诚心祈福并抚摸手印即可明智慧，去烦恼。
澡浴池是北台和中台之间的一座小寺院，听起来不象是一个寺院的名字，但确实就是这样叫的，全称是万圣澡浴池寺。寺的得名是院中有一水池
