O palácio branco Beaux-Arts em 2080 Washington Street, de frente para Lafayette Park, foi construído em 1913 para Adolph Spreckels, herdeiro de uma fortuna açucareira, e sua esposa Alma de Bretteville Spreckels. O arquiteto George Applegarth o modelou em um castelo francês. Alma posteriormente fundou o museu California Palace of the Legion of Honor.
Desde 1990 a mansão é a residência da romancista Danielle Steel, conhecida localmente pelo alto e denso cercado de ficus que ela plantou ao redor da propriedade, que tem sido objeto de disputas contínuas com a cidade sobre sua altura. Esta é uma residência privada. Visualize-a do lado do parque.