廣慈醫院，它的法文名稱為聖瑪利亞醫院，是由法國天主教會建立的，一家擁有外科的西醫院。在1907年建成時，便有了中文名「廣慈醫院」，意為廣泛施予慈善。
剛建成時，廣慈醫院擁有四幢兩層樓的病房，其中兩幢作為病房，設計得坐北朝南，這樣在冬天能保持溫暖，夏天又比較涼爽，而且這兩幢房子共計有100張病床。另外還修建了兩幢房子，一幢作為修女住宿的地方，另一幢作為員工宿舍。在這之後，又新建了一幢二層的聖味增爵樓，它有90個床位，專供貧困的男性患者使用。
到了20世紀20年代，醫院又建了兩幢二層樓的房子。一幢是聖心樓，作為產房使用，專收貧困的女性患者。隨後，又建了巴斯德樓，增加了化驗室，此時該醫院已成為遠東地區規模最大的醫院。
廣慈醫院的主要建築是磚混結構，具有法國文藝復興時期的特征。它的屋頂平緩，屋檐出挑較大，檐下有木質托角和裝飾帶。外墻主要是由清水紅磚墻構成，立面上多處運用了雙壁柱。主入口部份的設計獨特，平面有微微凸出，前面有平台並且兩側有大台階。建築中上下兩層的清水紅磚窗間墻縱向貫通，增強了立面的垂直效果和韻律感。從整體來看，建築的尺度親切怡人。
新中國成立後，高等院校進行了院系調整，此時廣慈醫院被劃歸到上海第二醫學院，並成為該醫學院的一所附屬教學醫院。有一段時間，它被更名為東方紅醫院，但現在的名字又變回了瑞金醫院。
