近代医学の理論と16世紀のフランス城館からヒントを得た建築家チャールズ・ハイトの丸い塔は、当時病気の温床とされていた鋭い角に細菌や汚れがたまるのを防ぐために設計された。 また、各塔の中央にはエアシャフトが縦に通っており、病室内の空気がよどまないよう工夫されている。 この設計は、19世紀における最新の換気技術であったと考えられている。 1888年のニューヨーク・タイムズ紙は、「全体として、この特徴は病院建設における新しい出発点となり、この立派な構造をこの種の模範とするものである」と評している
20世紀には、放射線治療などがん治療の新しい技術ももたらされた。 1921年、キュリー夫人はニューヨーク癌病院（当時は癌と関連疾患の治療のための総合記念病院と改称）を訪れ、当時世界最大の蓄積量であった4グラムのラジウムを保管しているレンガと鉄でできた金庫を見た。 ラジウムは、当時世界最大の蓄積量を誇っていた。 キュリーは最近、貧血で体調を崩しただけだ」と、放射性物質による害を否定した。 この時期、ラジウムの危険性が明らかになりつつあり、ラジウム推進派の抗弁に拍車がかかった。 1934年、彼女は当然のことながらラジウム中毒で死亡した。 しかし、今にして思えば、初期の放射線治療は、病気よりも悪い影響を与えることが多かった。 放射線は火傷を負わせ、場合によっては新たながんを誘発した。 ニューヨークがん病院は、その善意で成功したのだろうが、入院患者の苦しみは尽きない。 ゴシック様式の窓からは、本館の西側にある高い煙突が見え、より一層恐怖を感じさせました。 この病院は「バスチーユ」と呼ばれ、患者や利用者から恐れられ、避けられるようになった。 そして、1920年代初めには、「総合記念病院」と改名した。 1955年、癌と関連疾患の治療のための総合記念病院は、古くなったセントラルパークウェストの施設から、イーストサイドの新しい場所に移転しました。 そこで、現在のメモリアル・スローン・ケタリングがんセンターへと発展していった。 この頃、旧ニューヨーク癌病院の建物は衰退の一途をたどっていた。 老人ホームの大物バーナード・バーグマンの所有となり、「タワーズ・ナーシング・ホーム」という施設になったのだ。 このナーシングホームは、後にその過失と基準の欠如で悪名高い施設となった。 高齢の患者たちは、不十分な暖房、害虫の発生、身体的虐待、怠慢など、「残酷な状況」を証言した。 放置されていたのは、患者だけではなかった。 古い施設は手入れが行き届かず、不潔で、「刺激臭」が充満していた。 かつて完璧だった建物は、悲しいことに廃墟と化していた。 メディケイドと税金の不正受給の疑惑をきっかけに、州と連邦政府の調査が入り、最終的に1974年にこの施設は閉鎖されることになった。 老人ホームの閉鎖後、旧ニューヨーク癌病院は悲惨な状態になり、ニューヨーク市のランドマーク保存委員会が1976年に病院の建物を歴史的建造物に指定するまで、取り壊しの話もあったほどです
。