Architekt George Page został zamówiony w 1903 roku przez Mary Chynoweth, wdowę po Ansonie Hayesie i żonę adwokata z San Jose Thomasa Chynowetha, aby zbudować dom, który zastąpi drewnianą angielską barokową rezydencję rodziny Hayesów, która spłonęła doszczętnie w 1899 roku. Miała to być potrójna rezydencja dla Chynowethów i powiększających się rodzin dwóch synów Mary (Everisa A. Hayesa i Jaya Orly’ego Hayesa), a projekt domu uwzględniał najnowsze ówczesne rozwiązania przeciwpożarowe.
Wcześniej posiadłość była samowystarczalna, miała własną elektrownię, pocztę, stację kolejową, postój dorożek, mieszkania dla 40 ranczerów i kaplicę. Rodzina uprawiała owoce i warzywa oraz hodowała własny inwentarz. Everis A. Hayes i Jay Hayes pomogli rozwinąć przemysł owocowy w Santa Clara Valley i zostali wydawcami San Jose Mercury. W czasie swojej świetności rezydencję odwiedziło trzech prezydentów Stanów Zjednoczonych.
Rodzina sprzedała posiadłość w latach 50-tych, po czym budynek stał przez jakiś czas pusty, a następnie popadł w ruinę. Zakupiona przez miasto San Jose w latach 90-tych, posiadłość została odnowiona i rozbudowana do obecnego stanu. Budynek posiada obecnie 33 000 stóp kwadratowych (3 100 m2) powierzchni konferencyjnej i 214 pokoi gościnnych oraz jest otoczony 20-akrowym (8,1 ha) parkiem.