棠樾村古時屬徽州歙縣西鄉22都9圖。東至徽城7.5公裡,為鮑氏世居之地。宋始祖鮑榮在這裡創建別墅。南渡後（1130年）榮曾孫居美攜家由徽城遷此。棠樾西北有高山名靈山，水循山脈過軟橋出西沙溪。元代鮑伯源倡宗人截流築“大母堨”，引水入村，灌田六百余畝，旱澇不饑。田以南有富亭山，古時有亭園之勝。村之西有先達祠，祠東有鮑彰山墓，墓北郵德公塘，元鮑德築造。墓南有監察御史坊，為彰山公而立。沿街道東行有誠孝堂，祀明孝子鮑燦。誠孝堂與鮑象賢宣忠堂、尚書祠相向，祠東為鮑宗巖慈孝之門。再東為鮑絅翰林祠，（舊名耕讀堂）。鮑源深主講師山書院時，與朱升、趙東山、唐白雲等名士文酒之會，常在此堂。循堂而北有進士廳，廳南為地官坊。由地官坊而東為老誠孝堂，孝子鮑逢昌生於此。又東為井巷，逾巷有鮑燦故居存愛堂。再往東就是掌書園--鮑氏始祖榮公孺人墓地。墓南有橋名為“復古”。墓北為鮑同仁狀元坊址。坊之東即橫路塘，有進賢橋。越橋為大和社及社屋坦，地空闊，昔日為村人春秋祈報、演戲、樂神之場所。上有世濟橋，橋右為女祠清懿堂，循祠院牆而東是文會、男祠敦本堂。文會之左為世孝祠。敦本堂左有西疇書院，宋解元鮑壽孫與進士方回講學處。

緣祠宅而東南有坊七：鮑燦孝子坊、慈孝裡坊、鮑文齡妻節孝坊、鮑漱芳鮑均義行坊（嘉慶二十五年建，村圖中缺）、鮑文淵妻節孝坊、鮑逢昌孝子坊、鮑象賢尚書坊。義行坊前有骢步亭，亭在堤上，即堤為路，兩邊植梅，掩映如畫。東行堤盡有三元庵，旁為鮑潛繼配方節婦墓。墓北有餞賢岡。明初鮑絅入尚賓館編修元史，士大夫踐行於此。岡西北行有橋，八月望日，自橋上視水中，左右見月各半，名半月橋。村東北龍山特起，登山遠眺，群山皆居其下，黃羅、天馬諸峰隱然在目。昔山間有明成祖御制詩碑及慈孝堂，即鮑宗巖、鮑壽孫父子遇賊爭死處。古有二松，寇曾縛宗巖父子於上，大者虬枝龍甲有受縛狀；小者附身诘屈，若乞哀者然，眾呼為慈孝松，惜已不存。