仙岩镇有地名白岩，旧属游谢乡。

　　有徐氏居此间。今存光绪甲午重修顺德堂《剡北白岩徐氏宗谱》，内收清乾隆间郑文蘭所撰《雨苍公传》言：“先生讳钦龙，字雨苍，号靖庵。居剡北之白岩乡。”宗谱又录清嘉庆间石城庠生梁鑑所撰《赠承全公序》：“剡北三十余里，有一禅寺，名天竺。居白岩山之巅，与嶀山并峙，崇峦耸翠，修竹茂林，洵足娱也。”可知天竺寺在白岩山巅，此处属会稽山脉。白岩村因山而得名。

　　白岩徐氏以宋代景十一公为始祖。景十一公迁居廿一都之官庄；其后克成公于明永乐间迁于游谢乡十九、二十都白岩，为白岩之始迁祖。徐氏谱存清乾隆间《后土祭文》曰：“浙江绍兴府嵊县游谢乡嶀台里白岩堡信士徐某某等谨以牲醪品供瓣香束楮之仪致祭于某山某坂。”则清乾隆间白岩又称白岩堡。

　　清末小说家徐哲身为白岩人。哲身谱名积馀，官名官海，字伯庆，号浙生，别署剡溪放形客，后改养花轩主。少负才名，与陈蝶仙、周子炎诸人并称能诗。生平著作极富，代表作有《官眷香梦记》《反啼笑因缘》《清代三杰曾左彭》《汉宫二十八朝演义》《春江新潮》等，另有《养花轩诗集》行世。