桃李园位于横路街中部，建于清咸丰年间，由正屋和庭院组成，是西递徽商胡元熙的旧宅，也是西递唯一的住宅、书馆相配的建筑。后进厅堂两侧有12块雕花木板，上面依次镶西递风景图有书法漆雕《醉翁亭记》全文是出自康熙年间古黟书法家黄元治之手，十分珍贵。