寿安寺最初由四川僧人来崇建造，定名为"富安寺"。元朝延佑五年，朝廷寺额"永富寿安寺"。经宋、元、明、清四朝不断修缮和扩建，寺内建成大雄宝殿、念佛堂、千佛阁、忏堂、沧海阁、天王殿、玉莲池、紫竹林、清远堂、丰乐亭、月圃诸胜等建筑，琉璃金瓯、浮光溢彩、画栋彩柱、雕门透窗、金壁辉煌、相互辉映。寺内三尊铁铸三世如来佛像，均重达数吨。另有两株植于清朝的银杏树，直径盈尺，绿荫覆地，被列为市级古树名木。寺内还存有历代碑刻铭文和文人骚客墨宝，引来各方游客流连于寺。每逢佛期诞辰之时，寺内红烛高照，梵香缭绕。