榉溪村位于大盘山北麓，古称桂川、榉川，四周群山环绕，山川秀丽，环境幽奇。孔氏家庙位于榉川村中部，建于南宋宝？二年（1254）。榉溪孔氏始祖孔端躬原籍山东曲阜阙里，系孔子四十八代孔，自幼聪颖好学，登进士第，宣和三年（1121）授承事郎，任大理寺评事，持身洁白，谳狱恕平，吏畏其威，人怀其惠。宋建炎间，端躬及世袭衍圣公端友遭金乱扈驾南渡，后端友寓居衢州，端躬安家于婺之榉川。据《榉川孔氏家谱》载：“惟婺祖端躬公，官居大理事评事，乃由台抵婺至永之榉川，见其山高水长，泉香土沃，弃华衮之荣而优游自乐，屋于钟山之下而成焉，此南北之所由分而三派之所自始也”。 宋宝？二年，理宗追端躬功德，按衢州孔氏家庙恩例，在榉川南岸杏坛园前建孔氏家庙，赐“万世师表”金匾一块（已佚）。孔氏家庙坐南朝北，遥对金钟山，榉溪从前面环绕而过，整座建筑以中轴线贯穿，由门楼、戏台、天井、前厅、穿堂及两小天井、后堂组成。孔氏家庙建成后，在元、明时期由官府负责进行过较大维修，清初家庙毁于兵燹，现存建筑为清末重建，但也保留了宋、元、明不同时期的建筑风格。