座落在延安西路64號的上海市少年宮是一座近代豪華的花園別墅。這座建築建成於1924年，佔地達15萬平方英尺，建築面積近5萬平方英尺。別墅的外面是個大花園，繁花似錦，樹木蒼翠，南面的草坪上曾建有馬廄、鹿廄、網球場、暖氣花房等，那原是供嘉道理家族及其親朋好友們玩耍享樂的天堂。內部設有大小客廳及房間20餘間。樓下為舞廳及餐廳，廳高近65.62英尺，面積近4306平方英尺。除此之外，還有會客室、休息室、娛樂室等，臥室設在樓上。各個房間的裝修風格及色調均不同，但都十分華貴，相傳是仿歐洲古代宮廷的格調，衛生間、浴室共有6處。三樓有倉庫、僕人住處等。這座建築內外牆面及地面幾乎都用意大利大理石飾面。入口處有愛尼式大理石柱廊，大廳頂部用大理石砌成穹頂，地面四周也鋪有大理石，中間為柚木花紋地板。因為這裡是跳舞的地方，這種柚木地面最適合。樓梯的梯級、扶手、欄杆也用大理石，因此人們就稱這座房子為『大理石宮』。

　　這座建築的主人是英籍猶太富商埃黎·西拉斯·嘉道理爵士（Kadoorie·Sir Eleazer·Silas）。19世紀末，他在香港和上海兩地辦實業，在建築、房地產、公用事業、橡膠、金融等行業都有投資，並形成一定的規模，開創了香港第一家經紀行。1926年，他因舉辦慈善事業（如上海的育纔中學，即今育纔中學，是他出資創辦；又捐款創辦上海首座肺結核病院，即今上海第一結核病院等），英王授予他爵士封號。20世紀30年代，嘉道理的兩個兒子：勞倫斯·嘉道理（1899年生於香港）、霍瑞斯·嘉道理（1902年生於倫敦）協助其父親開拓事業，形成嘉道理家族集團，在上海灘名望漸大，成為與沙遜、哈同等齊名的猶太商財團。

　　1919年，嘉道理原先在今黃陂南路上的住宅失火，妻子摩卡塔為救被困屋內的家庭女教師而喪生。嘉道理悲痛欲絕，為避免觸景生情，帶著兩個兒子去倫敦暫住。行前委托好友建築師拉漢·布朗為他在大西路（即今延安西路上）重建新屋。沒想到布朗酗酒成性，將新屋交給英商馬海洋行的斯金生設計後，便不再過問此事。結果，1924年新屋落成，嘉道理重回上海時，看到的是『一幢宮殿式的建築和一個爛醉如泥、正躺在醫院裡的布朗』，而管理這幢花園洋房至少得用三、四十個傭人，更讓他吃驚的是，承包商寄來的賬單上竟是高達100萬兩白銀的天文數字，按當時米價折算，可買大米2500萬千克，足夠14萬人吃一年。別墅以巨額的白銀建造，弄得嘉道理哭笑不得；但這畢竟是一座美麗的建築，而且嘉道理本人也十分喜歡這幢建築。

　　抗戰初期，從歐洲逃過來的猶太人很多。1938年10月，大批的猶太難民湧入上海，霍瑞斯·嘉道理首先出面召集救助會議。上海所有的猶太社團和社會救濟組織都來到這座『大理石宮』，決定建立『上海援助歐洲難民委員會』，並采取聯合行動幫助難民。嘉道理家族不但捐出巨額錢物，而且還出資創辦起上海猶太青年學校，專收歐洲猶太難民子女，使這些正在逃難中的青年即使受到了良好的教育。嘉道理家族首先發起組織集體救援在這場災難中做出了積極而有價值的努力。

　　後來太平洋戰爭爆發，日軍進入租界，嘉道理一家被趕出這座豪華別墅，押往香港，被關在集中營；後來又被押回上海閘北集中營，飢餓、寒冷、病痛，還受到百般折磨，過著非人的生活。而那座豪華的『大理石宮』此時則成了日軍一個軍事機構，成了一處見不得人的魔窟。

　　抗戰勝利後，美軍登陸上海灘，他們通過瑞士領事館與嘉道理兄弟取得了聯系，並要求他們仍住在大理石宮內。兄弟倆十分興奮，他們進入大理石宮後打開了所有的電燈，以示歡慶戰爭的勝利。後來這裡成了美國、澳大利亞和英國軍人的活動中心。解放後，嘉道理家族結束了上海的業務，轉至香港經營。經宋慶齡先生提議，1953年5月31日，上海市有關領導在慶祝六一國際兒童節的聯歡晚會上宣布：中國福利會少年宮正式開幕了！地址就選在正在舉行晚會的『大理石大廈』。隨後又在院內先後修建了科技樓、游藝樓、小劇場和天象館。這裡成了孩子們的樂園。勞倫斯·嘉道理夫婦於1979年再次來到上海時，心情非常激動。他說：『我父親特別喜愛的大理石大廈，已成為幾千名兒童獲得知識的地方。』1989年嘉道理別墅被列為上海市近代優秀建築保護單位。

　　1997年8月2日∼8月8日，澳大利亞、比利時、加拿大、德國、匈牙利、意大利、日本、韓國、新西蘭、俄羅斯、西班牙、泰國、美國、中國等國家的千餘名和平少年代表歡聚上海，舉行上海國際少年兒童文化藝術節。為歌頌和平、傳播友誼、創造未來在中福會少年宮的草坪上立下了和平友誼門。