當時上海建業地產的公寓或住宅區壹般都是以法國地名命名的，所以該樓盤以法國西北部的半島諾曼底命名。諾曼底公寓是上海最早的現代高層公寓之壹。當時，住在公寓裏的大多是來自上層的外籍人士。據紫林洋行1937出版的《中國旅遊指南》上海街導壹欄記載，當時有大量洋行高級職員和外商居住在此，如嘉迪火友物業公司銷售總代理、友邦保險公司上海辦事處經理、西門子上海公司經理等[2]。太平洋戰爭爆發後，大量英、美、法僑民被投入集中營或為日軍驅逐出境。到1945，諾曼底的入住率只有三分之壹。
從65438年到0945年，隨著抗戰勝利，世界儲蓄會債務業務到期，戰時損失嚴重的世界儲蓄會難以清償債務。當時參與的債權人要求上海市政府介入，保護債權人利益。從65438年到0946年，上海市政府下令世界儲蓄會破產清理，其大部分產業被市政府拍賣，所得現金用於還債。有些產業是政府購買的，諾曼底公寓就是政府購買的產業之壹。之後，大部分公寓被市政府分配給了公務員。
1953，諾曼底公寓被上海市人民政府接管，更名為武康大廈。後來，趙丹、王、秦怡、孫道林、鄭、王等壹批文化界、演藝界的知名人士先後在此下榻。