潘师道号太乙，1585年入举人，1591年中进士、历任太理寺评事、吏部福建清吏司员外、邵武知府、浙江布政司右参政、四川按察使、浙江布政使司巡抚等职。相传，潘师道回乡做了一个气势宏大的祠堂，祠堂的大门是方形的，文官路过此地时，必须下轿，武官必须下马，那时，潘家门庭若市，热闹非凡。如今，老祠堂后人对其进行了改造，当年气势非凡的影子还依稀可见，巨大的圆木仍保留其中，上马墩、系马石也保存完好。

在村中，流传着很多潘巡抚的故事，其中“火烧巡抚脚”的故事流传最广。据说，潘师道在２岁的时候，其母亲去水塘边洗衣，突然，母亲听到一只喜鹊盘旋头顶鸣叫三声“火烧巡抚脚”。母亲很奇怪，喜鹊怎么开口说话了？惊慌中丢下手中的衣服，跑步回家。原来，家中起火了，一股浓烟正从儿子的房间滚滚而出，还伴随有儿子的啼哭声。母亲见状，不顾身家性命，准备往火海里闯。突然，一声响雷，电光一闪，火灾自行熄灭了。母亲冲进屋内，抱起儿子，儿子只是轻轻地烧伤了脚部。果然，儿子长大后，做了巡抚。