Ghirardelli Square occupe le complexe de briques rouges construit entre les années 1890 et 1910 pour la Ghirardelli Chocolate Company, fondée par l’immigrant italien Domingo Ghirardelli en 1852. L’entreprise y a fabriqué du chocolat jusqu’en 1962, date à laquelle elle a transféré la production de l’autre côté de la baie.
Plutôt que de démolir l’usine, un groupe dirigé par William Matson Roth l’a achetée et convertie en l’un des premiers centres commerciaux de réutilisation adaptative du pays, un modèle qui a été copié par la suite aux États-Unis. L’enseigne Ghirardelli illuminée sur le toit est un point de repère, et une ancienne boutique de crème glacée et de chocolat y fonctionne toujours.