1931年，杜月笙在上海灘已經徹底做大，但倒退7年，1924年，那時的他，儘管羽翼已豐，卻還沒有展翅翱翔，這讓他接受了黃金榮的一次饋贈：法租界華格臬路兩幢完全相似的洋房中的一幢。這華格臬路180號，便是而今寧海西路的212號。兩幢完全相似洋房中的東邊一幢為張公館，為三間兩進。前一進是中式兩層石庫門樓房，後一進為西式三間三層樓洋房。張嘯林曾在張公館中舉行他的六十大壽慶典，轟動的程度可與“黃家花園”和“杜家祠堂”的落成相媲美。
西邊那幢便是杜公館。杜月笙將前面中式樓房的樓下三間全部打通，改成一個大廳，一塊“餘慶堂”的大匾掛於大廳中央上方，中間又掛有巨幅中堂，兩邊為鄭孝胥所書橫聯。紅木長桌上則擺有福、祿、壽三星瓷器像，桌前的兩張紅木方台上各置一隻高大的瓷器瓶。大廳後面還辟出專藏書畫的一小間，他人不得隨意進入，只供杜月笙閒時在這方“淨土”中進行一番超越你死我活江湖生活的把玩。後面的西式樓房，杜月笙將底層作為自己的辦公室、賬房間和大菜間。在大菜間裡，你可以目睹懸掛於煙榻上方的杜月笙身著戎裝的巨幅肖像，而在會客室前辟有一個秘書間，也充作杜月笙的書房。每當晚間無事，杜月笙便會來此練習寫字，這是杜月笙與尋常江湖上的黑白兩道大亨們的截然不同之處，自小飽嘗失學之苦的杜月笙，發跡之後，最難以忘卻的事情之一便是興辦教育。這個杜公館，居住著杜月笙的原配夫人沈月英、第二夫人陳幗英、第三夫人孫佩豪，至於第四夫人姚玉蘭一般不在這裡居住，而是與他居住於辣斐坊，享受的不是前三位女人的待遇。及至杜月笙與貌如天仙、紅極一時的名伶孟小冬在黃金大戲院相遇，並發展了一段難捨難分的感情，那剛好是第二個公館的落成之時。
