出身於官宦世家
江流滾滾，晝夜不停。古稱龍盤虎踞的石頭城江寧，雖不及當年六朝時的繁華，然而，作為大清帝國在江南施行政令的頭號重鎮，它依舊保持著一個水陸交通發達的大都會所特有的氣魄與風致。
大約是為了顯示滿族封建統治者統一中國的功績，清王朝把明朝稱作南京的這一地方改為南唐時的舊稱江寧，江寧府治就設於城內。其實，這個地方在之前也稱金陵。
在府治東北角，總督衙署前邊有一條叫利濟巷的大街。這裏坐落著一處較江寧府治和總督衙署更為富麗恢宏的建築群，這便是赫赫有名的曹家江寧織造署的所在地。
曹家江寧織造署是一座外觀略呈正方形的大院落。織造署門前蹲坐著兩隻高大雄健的漢白玉石獅子。據說，這是一種顯示主人身份與威嚴的鎮物。從高大的朱漆大門看進去，院子深不可測，宛如當朝王公巨卿的府邸。
時值盛夏，整個署衙院落裏，林木蔥鬱，枝柯相接，竹樹聯袂投於地下的濃蔭，與天際山雨欲來的滾滾烏雲疊合，恰像一個碩大的華蓋籠罩下來，讓人感覺有些壓抑和沉悶。
曹家當時屢遭不幸，非常不順利。康熙五十一年（1712年），最受康熙皇帝寵愛信賴的江寧織造曹寅去世了。經過這位老皇帝的特諭恩準，曹寅的長子曹顒承襲了父職，繼任江寧織造。
誰想這曹顒命運不濟，剛接任不滿三年，就身染重病，因醫治無效，於康熙五十三年（1714 年）命歸黃泉。康熙哀痛之餘，可憐曹家屢遭變故，人丁不旺，為了挽救這一家族的頹運，特傳下詔書，命曹寅已亡故的弟弟曹宣的兒子曹頫過繼到曹寅名下，以侄為子，承嗣曹寅一脈的香火，仍襲任江寧織造這一重要世職。
康熙對於曹家真是恩澤有加，關照無微不至。這中間的幹係，還得從曹家的先祖曹世選說起。曹世選又名曹錫遠，原為漢族人，祖籍江西南昌武陽鎮。