臨頓路上車水馬龍，熙熙攘攘間向南一過白塔路，右手邊就會出現一座小橋，樸素到毫不起眼，一不小心便會錯過。然而，早在一千兩百多年前，它就曾入詩人的夢中—「揚州驛裡夢蘇州，夢到花橋水閣頭」（白居易〈夢蘇州水閣寄馮侍御〉）。自清乾隆五十八年（1793）起，潘奕雋一家祖孫幾代人，在這花橋畔的敏慎堂裡生活，整整住了一百廿八年。

一九二一年，潘氏老宅易主，而今倏忽將近百年，舊屋仍有數椽在，只是人去樓空，非復往日景象。兩百多年前，清嘉慶十三年（1808）五月十二日，敏慎堂中一聲響亮的男嬰哭聲，讓年近古稀的潘奕雋喜笑顏開，六十九歲的他終於迎來了期盼已久的長孫潘遵祁。就在同年夏天，潘奕雋在三松堂旁西圃中營建新屋三楹，名曰須靜齋。此齋名後由其子潘世璜承用，咸豐五年潘遵祁從其父日記中，摘錄日常賞鑑書畫之事，勒為一編，名為《須靜齋雲煙過眼錄》，不無步趨宋人周草窗之意。潘遵祁在序中記述乃翁之語云：「世間寶物，所在必有神物護持，而一時寓目，等之過眼雲煙」。此說上溯蘇東坡〈寶繪堂記〉意趣，痕跡宛然，稍後郡中顧氏逕以「過雲」名其樓，殆亦從坡翁處來。且潘、顧兩家收藏中，確有相互遞受者，堪稱近世吳門藏家之掌故。

欣於所遇蘇州貴潘一族，自明末潘仲蘭（1609∼1677）從歙縣僑居蘇州南濠，至其孫潘兆鼎（1658∼1724）始葬蘇州，潘奕雋（1740∼1830）乃兆鼎曾孫。清乾隆五年（1740）三月七日，潘奕雋生於閶門內劉家?之謙益堂。其祖潘暄（1690∼1773）年過知命，屢應科試，皆不獲售，久困場屋，鬱鬱不得志。其父潘冕（1718∼1780）原名宗冕，字端元，號貢湖，為潘暄次子。因潘暄長子宗亢（1716∼1731）於十六歲時早逝，潘冕遵循父命，以家庭為重，棄儒從商，養家糊口，終其一生，不過得一國子生而已。迨其身後，以子孫貴，累贈光祿大夫、經筵日講起居注官、太傅、武英殿大學士、管理戶部事務加八級。夫人汪氏，乃汪元任女，生子三：奕雋、奕藻、奕基；女二：一適汪起昌、一適顏奕馨。

潘奕雋字守愚，號榕皋，作為貢湖公的長子，從小便被寄予厚望。乾隆廿七年（1762），剛過弱冠之年的潘奕雋先中舉人，雖然有點晚，卻令年逾古稀的祖父欣喜不已。七年後，乾隆卅四年（1769）四月，潘奕雋以三甲第九十七名及第。原來其試卷在進呈御覽的前十名中位列第七，但因引見時不到，奉旨與第十卷季學錦改附三甲末，是科三甲共九十八名，潘氏名列倒數第二。儘管由於一時失誤，潘奕雋從名列前茅改附龍尾，讓他心存不甘，但畢竟中了進士，一雪父、祖兩代未得功名之恥，成為潘氏一族躍升科舉世家的先驅。

潘奕雋二弟奕藻（1744∼1815），字思質，號畏堂。繼於乾隆四十九年（1784）中進士，歷任刑部山西司主事、安徽司員外郎、陝西司郎中、三通館纂修、文源閣詳校、戊申科湖南鄉試副考官。三弟奕基（1745∼1824），原名奕箕，字汝勤，號雲浦。附貢生，乾隆卅九年（1774）順天鄉試挑取謄錄，任四庫全書館謄錄，議敘州同。三兄弟先後有兩人中進士，他姓或以之為盛事，對於潘家而言，這僅僅只是開始。就在潘奕雋中進士的同年十二月廿一日，三弟潘奕基之子潘世恩（1769∼1854）在蘇州出生，乾隆卅四年（1769）似乎成為潘氏一門顯貴的時間節點。