Baltimore leży w Stanach Zjednoczonych w stanie Maryland. Miejscowość ta miała szczęście być miejscem zamieszkania George’a Peabody’ego. Ów dziewiętnastowieczny gentleman dorobił się znacznego majątku. Gdy we Francji panował cesarz Napoleon, który miał wystarczający tupet, by podbić niemalże całą Europę, król brytyjski Jerzy III ogłosił embargo, w wyniku którego m.in. statki z USA nie mogły przybijać do żadnego z portów, które znajdowały się pod francuskim panowaniem. Amerykanie w końcu zbuntowali się i rozpoczęli handel z Cesarstwem Francuskim. Jednym z tych, którzy mieli odwagę rozpocząć ten niebezpieczny biznes, był Paebody. Kiedy stał się bardzo bogaty, postanowił podzielić się posiadanym majątkiem ze społeczeństwem.
Jednym z ufundowanych przez niego gmachów był właśnie budynek biblioteki. W 1857 roku założył instytut swojego imienia, fundując go w podziękowaniu za życzliwość i gościnność mieszkańców miasta. Jego aspiracją było stworzyć wszechstronną bibliotekę, obejmującą zbiory z wszelkich dziedzin, z wyjątkiem prawa i medycyny. Budynek biblioteki został uroczyście otwarty w 1878 roku.
Projekt wykonał architekt Edmund G. Lind, który konsultował się z proboszczem Morisonem. Świetlik głównej sali zbudowany jest centralnie na wysokości 19 metrów nad ziemią i oświetla sześć kondygnacji umieszczonych w otwartych na środek galeriach. Biblioteka skrywa 300 tysięcy woluminów, z których większość pochodzi z XIX i początków XX wieku oraz stale uzupełnia swoje zasoby.
