The Ferry Building åbnede i 1898 ved foden af Market Street med et 245 fod høj urklokkehus modelleret efter Giralda klokkehuset i Seville. Før broerne blev bygget var det en af verdens travleste togstationer med titusindvis af pendlere der ankom med færge hver dag.
Broerne og bilen gjorde det næsten overflødig, og i mange tiår løb Embarcadero Freeway direkte foran det, hvilket skjulte det for byen. Efter motorvejen blev nedtaget i 1990’erne blev bygningen restaureret og åbnet igen i 2003 som en markedsplads for lokale fødevareleverandører. Et bondemarkeds finder sted foran det flere dage om ugen. Urklokkehuset overlevede 1906 og holder stadig tiden.