寓园原为程易祖父程埈住宅的后园，在竹巷街西端梅家巷头。程埈是程朝徵的第三子，也是著名盐商文人程嗣立的三哥。张新标曲江楼出手时，就是卖给他的，他是曲江楼的第二代主人。曲江楼在萧湖中，此处便是其住宅。门以内，前为斯美堂，向东八角门内，面南者为菉竹堂，后为兼山堂，再后为新厅，又后曰听汲轩，旁即可继轩。兼山堂有一楼，其裔孙程得龄题曰“枣花楼”。再折而东，有六有斋、怡怡楼等建筑。
  此宅园原为明代抗倭状元沈坤的家园，后为晋商阎若璩先人所得，名曰眷西堂。阎氏故宅及眷西堂原在新城，迁于此后仍称眷西堂，俗称阎家过道。张穆在《阎潜丘先生年谱》卷一中云：
  陈其年《四六集·赠阎梓勤二十初度》诗自注：“梓勤（阎若璩之子阎咏）居淮之竹巷状元里。” 
  丘琼山过山阳诗：扬州千载繁华景，移在西湖嘴上头。”西湖嘴在运河东岸，距余家状元里仅二百步。余尝笑此谓成弘时之西湖嘴耳。
  寓园后来又被转手卖给了程氏，程氏又有所增建，枣花楼、兼山堂等都是后来程埈新建。淮北盐商首领程易的父亲程亮俦是程埈的长子，他是程埈的孙子，便继承了此处宅园。其家行盐业俭德店，就在此宅旁边，宅后园就是寓园，前通住宅，后门在柳家巷。据李元庚《山阳河下园亭记》记载，从程宅厅事旁边向后，由假山洞中进入园中，西边是一座高楼，画栋朱阑，有飞云卷雨之势。垒山为垣，周遭不断。前有红桥十丈架于池塘之上，池宽而深，直通北边金家桥码头，活水源源而来。峰回路转，有亭翼然。亭下松椶竹石，有一狮子石，盘空矗立。敞厅三楹，曰“平远山堂”。西有樵峰阁，又横列三椽，曰“荫绿草堂”。后有“香云馆”、“殿春轩”、“半红楼”。东有长垣洞辟，横廊三楹，白石铺地，有合六间为一间者，曰“揽秀”。揽秀西有门，署石曰“寓园”。揽秀之东，高楼一带，中有一楹跨街，接东向大楼，三面朱栏，名曰“跃如”。楼下敞厅数楹，院中芍药一砌，这就是“殿春轩”。旁有箭道，即所谓射圃。揽秀之后，有楼四围，名“涌云楼”，“疏窗开四面，面面总临池”，又有“澄潭山房”。
  寓园本名可园，又名可以园，李绂《饮程圣则可园》诗中有一联云：

收将天竺云千叠
占得淮流水半湾

  此联足以可见园中山水景致颇佳。寓园则是两淮都转盐运司副使张永贵所命。“寓园”石额嵌在揽秀西边的一个门上，其字为当时书法家梁同书先生所书。园中景点“揽秀像”是一个会堂式剧场，这是程家所蓄优伶演出的地方。
乾隆四十一年（1776），张永贵假借此园消夏，并以寓园主人身份，与官僚、幕客、文士结澄潭诗社，消夏唱和成集，还印刻了《寓园赠答诗钞》，并还有《澄潭诗社图》。
  此年夏六月十五，张永贵反客为主，被人都称为“乐斋主人”。他们在寓园饮酒、作诗的同时，还观赏戏曲。对于这次活动，当时许多文人有诗记载，如程沆《乐斋主人雨夜留饮，出小部佐酒，四截申谢》七绝、《六月十五日，主人招同舍弟寓园纳凉，兼领小部之胜。雨后月明如洗，主人兴复不浅，更命小伶，太湖石畔高低列坐而歌，恍听钧天广乐，不知身在尘埃间矣。漫成八截申谢》七绝八首、吴琰有《乐斋主人招饮寓园，出小部佐酒，即席次程晴岚太史韵》七绝四首、韦协梦、吴璥各有同题诗七绝四首等等。
嘉道间岁贡生沈大炳有《寓园观剧》七律一首，诗云：

樵峰阁下忽旗亭， 揽秀池台絮化萍。
天道尚宜盈复缺， 人生难得醉初醒。
三更射圃澄潭梦， 一曲铜琶铁板听。
莫唱龙标新乐府， 玉关杨柳怨飘零。

 
  这是诗人观剧后的感慨之作，所演是何剧目不得而知，应为闺怨、人生悲欢离合一类。诗人希望看苏东坡风格的敲铜琶、执铁板歌“大江东去”一类豪放高昂的剧情，不想再听王昌龄式的乐府。
  乾隆五十一年（1786），程易退休在家，他的寓园也常有戏剧活动。他在园内曾经招待过著名史学家赵翼，赵翼有诗《程司马吾庐招饮观剧赋谢》记其事。诗云：

淮水秋风暂泊船， 敢劳置酒枉名笺。
翻因误入桃源洞， 又荷相招菊部筵。
玉树一行新按队， 霓裳三叠小游仙。
殷勤最是留髡意， 别后犹应梦寐悬。

  赵翼与程易本不相识，最初他只认识河下程沆。程沆是乾隆二十八年（1763）进士，亦曾官翰林院庶吉士，二人曾同时在翰林院为官。在前一年过淮时，赵翼登岸寻访程沆，摸错了门，误入程易之家，因而与程易熟悉起来。赵翼曾为程易的小照题诗，程易去世后，他又为程易撰写了墓志铭。
  程氏宅与寓园占地约七八亩，李元庚《梓里待征录》卷下“俭德店宅相”中说，此宅园的形状像一只虎，“大门为头口；东柳巷头有土地庙一座，西侯巷有更房一间，为虎两眼；后门不大，为虎谷道；金家桥旗杆一，为虎尾；中有园，园有山石，即虎骨也。”
  直到程易之孙程百禄时，纲盐改票，盐业衰败，程家顿时败落。宅子与寓园“毁者半，而存者半，除茀庭所居，余归族人，赁为茶肆”。后来，宅园卖给了丹徒人、翰林编修王鸿翔的父亲王继曾。王氏也是经营盐业的，原住清江浦，后迁居河下此园。王氏初购得此宅时，园中亭榭已湮，惟假山荷池尚存。北边通河，水路进出仍由金家桥船厅。宅南及西边一带，地广数亩。宅中的住屋三进，中进辟有一所，题额曰研诒斋，是王鸿翔的读书处。另有二十二研斋，是其收藏珍贵名砚的地方。 
  “赁为茶肆”者即桐荫园茶肆，程钟《桐荫园褉游即事并序》云： 

  桐荫园茶肆，故族氏澄潭诗社址也。中有樵峰阁、香云馆、殿春轩、得月楼、作赋楼、平远山堂诸境，今皆倾圮无存，存者荫绿草堂而已。月谢风亭，都归零落。残山剩水，犹自清幽。今年上巳节，茝洲词客，邀同人修禊于此，烹陆羽之新茶，吊谢安之旧墅，各为诗歌，以志触景兴怀之意。

  诗中有“乱耳不须丝竹奏，绿杨深处有啼莺”二句，作者自注说“园中时有村优弹唱”。诗社则为茶肆，成了人们喝茶听书听小曲的地方。