嵊州三界镇原有杜家山村,行政村合并后,划归西杜村。
清宣统二年清介堂《剡北杜氏宗谱》(杜氏世系源流序)言:“……讷有孙珪,行十四,今杜氏所称珪十四祖也。徽宗朝以功授宣议郎,南渡时徙居剡之北乡五十六都,名其地为杜家山。数十年后,其长子咸五仍旧庐;幼子咸六又卜居于五十六都之浣溪,其地改名杜家堡。”(剡北杜氏家谱序)言:“有珪十四于高宗南渡时自天水随驾至驻跸岭,隐居于杜家山,仿佛桃源洞里人,厥后子孙繁衍。……”
根据宗谱记载,杜家山因剡北杜氏始祖杜珪定居于此而得名。