程大位（公元1533—1606年）是著名数学家及珠算发明家，其故居坐落在柏树街东里巷内。1985年，为纪念程氏逝世380周年，故将故居修缮开放，并正式建立程大位纪念馆，成为一个国际性的珠算研究和培训中心。故居为明代徽州古民居建筑：马头墙，粉墙黛瓦，飞檐翘角。大门为内外门楼，上饰精美的徽州砖雕，门内为天井，意味“四水归堂”。故居为两层，三开间，东西厢房，建筑占地面积为500多平方米。前堂为客厅，立有程大位画像，横梁上“程大位故居”匾额为著名数学家苏步青教授的题。楼上大厅内陈列有古今中外各式算盘、程大位菱、程低宗谱及各种珠算资料、图片。引人注目的是形状各异的算盘：大者有81档，1.75米长；小的如戒指算盘，仅0.02米，具有较高观赏价值和文物价值。故居西侧为“宾园”，程氏号为宾梁，故名。园内回廊小径，花草山石，景致典雅。墙垣窗户均为算盘图案，耐人寻味。