Le quartier de Cobble Hill à Brooklyn a été colonisé par les Européens au début du XVIIe siècle et a été inclus dans la ville nouvellement incorporée de Brooklyn en 1834. La grille de rue actuelle a été conçue dans le même 1834 et en 1860, les anciennes terres agricoles ont été développées en un quartier de maisons en rangée densément peuplé avec des banques, des églises et des magasins de détail. Deux maisons en rangée au coin de Henry et Amity, démolies plus tard pour faire place à la clinique, ont été construites en 1853 par un promoteur immobilier irlando-américain Edward Wilson.
La construction du bâtiment a été financée par Caroline Herriman Polhemus (décédée en 1906), la sœur de William H. Herriman, qui a fourni 400 000 $ au Long Island College Hospital (LICH) à la mémoire de son mari Henry Ditmas Polhemus, qui a été régent de LICH de 1872 à sa mort en 1895. Caroline Polhemus a également fait don d’une ferme dans le comté de Rockland à la Brooklyn Children’s Aid Society. À l’été 1895, Caroline Polhemus achète deux maisons en rangée d’angle et les démolit. Un concours d’architecture pour la conception de la clinique a attiré six offres; un jeune architecte, Marshall Emery, a remporté le premier prix de 500 $. La construction a commencé au printemps de 1897 et s’est achevée en décembre 1897. Emery a décrit son bâtiment, terminé dans des motifs de la Renaissance française, comme « digne et agréable, en même temps qu’il avait un caractère aussi marqué, monumental et académique que la disposition particulière de l’intérieur le permettra, tout en s’abstenant d’un usage excessif ou somptueux de l’ornementation ». Emery a consulté des médecins et des chirurgiens pour concevoir un hôpital complètement moderne. Des entrées séparées sur chaque façade séparaient les étudiants des patients et du personnel de l’hôpital.
Les fonctions du bâtiment étaient séparées verticalement; à l’origine, la clinique Pohlemus abritait:
- le dispensaire de l’hôpital dans les deux premiers étages;
- vestiaires d’administration et d’étudiants au troisième étage;
- cours de formation du quatrième au septième étage;
- et salles de dissection du Département d’anatomie au huitième étage.
La clinique était équipée d’un ascenseur, d’un chauffage à vapeur, d’une ventilation forcée, de générateurs électriques et de l’une des premières machines à rayons X existantes. Après l’entrée des États-Unis dans la Première Guerre mondiale, la Clinique Polhemus a fourni des installations de radiographie aux Marines des États-Unis.
En juillet 2008, LICH a fermé et vendu le bâtiment Polhemus (qui abritait alors ses services de chirurgie et d’anesthésie) et la maternité, invoquant la nécessité de lever des fonds pour échapper à la faillite. Les médecins se sont divisés sur la décision, blâmant Continuum Health Partners pour la mauvaise gestion des hôpitaux de Brooklyn.