Nazwa Alei Elfretha pochodzi od Jeremiasza Elfretha, XVIII-wiecznego kowala i właściciela nieruchomości. Wśród mieszkańców alei znajdowali się handlarze i ich rodziny, w tym stoczniowcy, kowale srebra i cyny, dmuchacze szkła i budowniczowie mebli. W latach 1770-tych jedną trzecią gospodarstw domowych prowadziły kobiety. Domy w stylu georgiańskim i federalnym oraz brukowana nawierzchnia alei były powszechne w Filadelfii w tym okresie. Domy są zazwyczaj małe, a wiele z nich to unikalne filadelfijskie domy Trinity.
Pod koniec XIX i na początku XX wieku, przemysł zaczął zmieniać ulicę. Być może pierwszą zmianą była fabryka pieców, która zajęła swoje miejsce w rzędzie domów mieszkalnych w 1868 roku. W końcu fabryki otoczyły Aleję Elfretha. Miejskie nabrzeże znajdowało się zaledwie kilka przecznic dalej. Przemysł zmienił więcej niż architektura; kolejne fale imigrantów, zwabionych pobliskimi miejscami pracy, przeniosły się na ulicę. W 1900 roku okolica była w przeważającej części irlandzka.
W 1934 roku założono Elfreth’s Alley Association (EAA), aby zachować historyczne struktury alei, jednocześnie interpretując historię ulicy. EAA pomogło uratować ulicę przed wyburzeniem, a także lobbowało miasto, aby przywrócić nazwę alei „Aleja Elfretha”; została ona wyznaczona jako 100 blok Cherry Street lata wcześniej jako część programu upraszczania nazw ulic.
Aleja Elfretha jest dziś produktem cykli odnowy miejskiej i rozpadu oraz wysiłków na rzecz ochrony zabytków. Aleja jest atrakcją turystyczną i rzadkim zachowanym przykładem 18-wiecznych zasobów mieszkaniowych klasy robotniczej. Strona stoi w ostrym kontraście do częściej zachowanych grand mansion houses Filadelfii Society Hill neighborhood.
Remarkably, biorąc pod uwagę znaczenie alei do historii architektury kolonialnej w Ameryce, jest bardzo trudno znaleźć dokładne informacje na temat datowania. Jednak obecnie istnieje strona internetowa finansowana przez National Endowment for the Humanities, która zapewnia dokładne datowanie budynków wraz z nowymi kolorowymi ilustracjami każdego domu, zarówno struktur z epoki kolonialnej, jak i struktur z epoki niepodległości.