宋经略潘畴本金华人,为上虞李光之婿,继由金华侨居上虞五夫,建月林书院,邀朱熹讲学,子友端、友恭皆及门受学,后伪学禁起,徒居上虞崧镇之南(今上虞崧厦镇潘家村)。
潘氏自友端、友恭定宅崧南后,才人辈出,代有闻人,科举从仕、道德文章他族无有比肩者,称为“五经世家”。