該園藝清光緒年間任過湖北漢黃道台、江漢關監督（有資料還說他曾任清政府駐法國公使）何芷（舟刀）所造，俗稱“何園”。因主人附庸風雅，從陶淵明“倚南窗以寄傲”、“登東皋以舒嘯”取意，為“寄嘯山莊”。
園分三部分，南部為住宅部分，前後三進，第一進為楠木大廳，二、三進為二層樓房，每進皆為七開間。楠木廳為主人會客之用，此廳極富層次，頂部為單檐歇山，中間三間略高，兩旁兩間略低，形成中高邊低的兩個層次。而從下部看，中間三間向前伸出兩米，旁邊兩間自然置於後部，立面上又形成中前邊後的兩個層次。廳內廳外裝飾極其富麗，外檐柱之間鑲嵌大型木雕月牙門九個，雕刻冰紋如意圖案，雀替是牡丹花的花籃，屋內窗隔全部使用梅花，冰紋鑲嵌而成。
除楠木廳外，後面兩進皆為雙層樓房，屋宇寬敞，規模宏大，每進之間皆列小院，小院中略置花台，配以樹木，以少量山石花草點景，顯得幽靜又富有生氣。總之南部建築總體布局嚴整，基本是多進四合院式建築，是研究清代揚州大型民宅的活標本。
園的北部即為花園，分東西兩部分。一入東部，即感到構園者身手不凡，構園強調有山有水，園以山奇，山因水活，可此處一無山二無水，但是當你進園時，先見輔景，南面是一畦牡丹芍藥圃，北面湖石貼壁山林，那山林皆為太湖石堆就，緊貼著牆壁，又高過牆頭，山林延北壁逶迤西去，折向東壁，再西折向北，直通迴廊復道，共有60餘米，好似一石頭的屏嶂，不僅將牆外諸多低矮民宅遮掩，而貼壁山林本身時起時伏，在東北接踵處的峰巔，有一山亭點綴其間，假山的竇穴、曲洞、石室、山房皆能上下溝通，給人以山外有山，樓外有樓的深遠意境。此園中多處使用此種包鑲之法，不僅用材節省，而且廓大了空間，使虛實結合，景有盡而意無窮，實為構園者處理特定地形的生花妙筆。
水的安排更為奇巧，何園為旱園，旱園水做常法都是挖一水塘，點綴些山石，沾點水氣而已。而何園構園者從一開始就另闢蹊徑，在進園處貼壁山林前，是一灣曲水，池旁湖石或如峭壁凌空，或如磯石俯瞰，池內碧水中游魚怡然，山上葛藤倒懸，更有山色樓台倩影映水，你會不自覺地嘆道：“活了！”更有趣者，前園的牡丹廳房安排船廳，看著這船形的廳堂，人們仿佛已到湖邊，再看廳下，以鵝卵石和小瓦鋪成的水的波浪紋，起伏有致，似見波光粼粼，似聽裂岸濤聲，此時你抬頭看那楹聯，“月作主人梅作客，花為四壁船為家”，大概你頓時會忘卻這是一個旱園，而會疑為在湖濱漫步，舫內盪槳。定會驚嘆構園者能在東園的山水樓閣中，居然使之無水而有水意，無山都有山情。
如果說東園是何園的序幕，當你到西園時才看到何園的主體，樓台的豪華，層次的深密，復道廊的逶迤曲折，山石的深遽空靈，在園林中確是獨樹一幟。西園樓台極富層次，低層有池中的水亭；中層有蝴蝶廳、桂花廳、望月樓；高層還有山石凌空。主體建築蝴蝶廳是上下兩層的七楹樓房，中間三間稍突，兩側兩間稍斂，崇樓傑閣的歇山頂四角昂翹，如蝴蝶振翅起舞。一個個廳堂都裝扮得極為富麗，可貴的是這些樓台雖為單體，但以立體復道廊周接。部分遊廊為復廊（一條廊中間用牆分隔為二），把園巧妙地分成東西兩部。構園者知道，此園外景雖不可借，但園內景可以互借，因此在廊的上部開漏窗，有的用水磨花窗作為分隔，有的直接開成空心窗洞，有折窗形、花瓶形、梅朵形、海棠形，廊壁間還鑲嵌顏真卿《三表法帖》，王羲之《十七貼》等詩條石，使串廊本身就極富美感。更值得稱道的以花窗為分隔，既可引進外景，又可泄出內景，自然加深了園林的層次，增加了園林內部環境氣氛的曲折變化，在各景之間相互呼應，相互因借中創造出更美的景色畫面和遊覽情趣來，這是“妙在因借”的活用。西園的山峰是全園的最高處，主峰以太湖石堆就，造園者在湖池旁採用點石之法，繞湖池一周，高低錯落，曲折有致地以湖石圍岸，在水亭旁又以湖石構成的曲橋以通亭閣，而在西南角則堆石成峰，有險壁、有懸崖、有奇峰、有幽岩，或如一人，或似一物，或象群猴戲鬧，或如雄鷹高踞。底部還有梅花三洞，互相串連、碧水貫穿其中，遠遠望去，顯得幽深清冷。此處構山極為適宜，因此處是園的邊緣，僅一牆之隔即為園外，而游賞者看著高聳的山石，定會產生“正人萬山圈子裡，一山過後一山攔”之感。這就增加了景深，開拓了意境。且山極空靈，上有盤山曲道，下有空谷勾連，既可沿山道仔細玩味山石奇趣，又可登山頂俯視全園美景，還可在山谷中納涼品茗，敘談話舊。