富安镇西街原来有座道观叫关帝庙，建于明代，庙内32间房，30多座贴金天师像，后来从敌伪时期到解放后被拆毁。大殿前有两棵高大巍峨的银杏树，免遭灾难幸存下来。一棵象扫帚，生长在富安２０４国道路中间，另一棵象洗锅把儿，生长在供销社院墙外，两棵白果树直径一米多，树高二十多米，至今枝繁叶茂，年年结果。民间相传，两棵银杏树是明代万历年间的名僧月江所植，树龄至今有四五百年，究竟何时何人所栽，目前已无法考证。
关于这两棵银杏树，民间还有一段美丽的传说：当年范公堤修筑至富安集镇时，有一条蛟龙总是作祟，海堤无法合拢。是日，当范仲俺巡查到此，那恶龙又来破坏刚筑好的海堤，范公的随从范富范安手持宝剑，纵身入海，搏杀蛟龙，一时间天昏地暗，恶浪滔天。等狂风巨澜渐渐平息后，人们从海滩上只找到两把屠龙宝剑，人们将宝剑葬于海堤两岸守护海堤，埋剑的地方长出两棵银杏树，从此海晏河清。为纪念范富范安的英雄壮举，此地得名富安。
这两棵银杏树见证了富安的沧桑历史，也成为富安的标志，象征着富安的精神。