Casa Casuarina wurde 1930 von Alden Freeman erbaut. Alden Freemans Vater, Joel Freeman, war Schatzmeister des Standard Oil Trusts (auch bekannt als Rockefeller’s Company) und hinterließ Alden ein sagenhaftes Vermögen, als er verstarb. Das gab dem jungen und wohlhabenden Alden die Möglichkeit, sich im Alter von 27 Jahren von seinem Beruf als Architekt zurückzuziehen und die ganze Welt zu bereisen. Alden war außerdem mütterlicherseits ein Nachfahre der Mayflower und fühlte sich der Geschichte sehr verbunden. Freeman, schon immer weit gereist und sehr intelligent, liebte den abenteuerlichen Geist von Christoph Kolumbus und besuchte auf einer seiner vielen Reisen um die Welt das Alcazar De Colon in Santo Domingo (Dominikanische Republik), das von Diego Kolumbus (dem Sohn von Christoph Kolumbus) erbaut wurde und als älteste Residenz der westlichen Hemisphäre bekannt ist.Alden war von dem Haus so inspiriert, dass er beschloss, sein eigenes Haus in Miami Beach als Hommage an den Alcazar De Colon zu bauen und kaufte 2 Ziegelsteine des Hauses zurück. Einer befindet sich rechts vom Haupteingang und einer in seinem ehemaligen Haus in der Stadt Santa Barbara, Kalifornien (genannt das „Montarioso“ Anwesen, das später der Stadt geschenkt wurde und dann von der Pearl Chase Society of Santa Barbara restauriert und untersucht wurde). Alden träumte davon, in einer Bohème-Gesellschaft mit all seinen Freunden aus lokalen Gegenden wie Coconut Grove und Coral Gables zu leben. Außerdem lernte er auf seinen vielen Auslandsreisen faszinierende Menschen kennen und lud sie immer wieder in sein schönes Haus hier in Miami Beach ein.
Die Hubbell & Hubbell Company war das Bauunternehmen, das für den Bau der Casa Casuarina verantwortlich war. Wenn Sie nach unten schauen, sehen Sie, dass der Boden aus originaler Key-Lime-Koralle besteht, die Teil des ursprünglichen Hauses war, das von dem bekannten Innenarchitekten Addison Mizner aus den 1920er Jahren entworfen wurde, der West Palm Beach praktisch erschaffen hat.
Das Anwesen hatte insgesamt 24 Apartments. Freeman wohnte in der Wohnung im obersten Stockwerk an der Südostecke. Die restlichen 23 Wohnungen im Gebäude wurden vermietet und dienten als Unterkunft für viele von Freemans Freunden, die Miami Beach besuchten.
Alden Freeman starb in Casa Casuarina am 29. Dezember 1937 nach längerer Krankheit. Das Haus wurde daraufhin für 100.000 Dollar an Jacque Amsterdam verkauft, der das Haus als Apartmentkomplex weiterführte, den er den „Amsterdam Palace“ nannte. Im April 1939 führte Amsterdam eine kleine Renovierung des Hauses durch, bei der er einen Aufzugsschacht einbaute (wo sich die heutige Glocke befindet), den Seerosenteich im Innenhof durch einen Terrazzoboden ersetzte und die kniende Aphrodite-Statue auf die vordere Terrasse versetzte. Die Zimmer wurden in der Wintersaison für 600 $/Monat und im Sommer für 30 $/Monat vermietet.
In den darauffolgenden Jahren ging der Amsterdam Palace durch die Hände mehrerer Besitzer und hunderter von Mietern. Für eine kurze Zeit in den 1980er Jahren hieß das Haus Christopher Columbus Apartments. Nach einer Weile verfiel das Gebäude allmählich, aber wie durch ein Wunder blieben die meisten der ursprünglichen Einrichtungsgegenstände und Kunstwerke erhalten.
Im Jahr 1992, während eines Urlaubs mit seiner Familie in Miami Beach, spazierte Versace den Ocean Drive hinunter und wurde von der Statue der „knienden Aphrodite“ sofort auf das Haus aufmerksam und verliebte sich in die einzigartige spanische Architektur des Anwesens. Besessen von der griechischen und römischen Mythologie, kaufte Versace das von Freeman erbaute Originalhaus für 2,95 Millionen Dollar und das Grundstück nebenan, ein altes Art-Deco-Hotel namens Hotel Revere. Obwohl diese Nachbarschaft 1979 in das National Register of Historic Places aufgenommen wurde und trotz des starken Widerstands der Miami Design Preservation League, kaufte Versace das Hotel Revere nebenan für 3,7 Millionen Dollar, um es abzureißen und den Garten, den Swimmingpool und den Südflügel zu errichten.
Versace investierte weitere 32 Millionen Dollar in die Renovierung, bei der er den Südflügel, den Pool und den Garten hinzufügte und die 24 Apartments in 10 große Suiten im ursprünglichen Haus und zwei zusätzliche neue Suiten im Südflügel umbaute. Außerdem entfernte er den Aufzugsschacht im Innenhof, ersetzte den Springbrunnen und rekonstruierte das Observatorium, einschließlich einer neuen Kupferkuppel. Versace hatte geplant, das damals ungenutzte Grundstück nebenan im Norden zu kaufen, um dort einen zweiten Garten anzulegen, aber als sein Tod dazwischenkam, wurde es Teil des Victor Hotels.
Die Renovierungsarbeiten dauerten fast 3 Jahre und am 15. Juli 1997, nur 5 Jahre nach dem Kauf des Hauses, wurde Versace auf den vorderen Stufen des Hauses auf seinem üblichen Morgenspaziergang nach Hause vom News Cafe getötet.
Neben Gianni Versace wurde das Haus auch von seinen vielen engen Freunden und Familienmitgliedern genutzt. Das Schlafzimmer seines Bruders Santo heißt heute „Venus Room“, das seiner Schwester Donatella ist die „Signature Suite“.
Ein Teil des Inhalts aus der Zeit, als Versace hier lebte, wurde im April 2001 in New York City für angeblich 28 Millionen Dollar versteigert. Was aus der Versace-Ära noch übrig geblieben ist, sind die reich verzierten Wände, Böden, Decken und Fenster sowie der Pool, der Garten und der gesamte Südflügel.
Das Haus stand etwa drei Jahre lang leer und im September 2000 verkaufte Donatella das Anwesen schließlich an Peter Loftin, einen Telekommunikationsmagnaten aus Raleigh, N.C. für 19 Millionen Dollar. Loftin nutzte das Haus von 2001 bis Ende 2009 als Privatresidenz sowie als Hotel, Membership Club und Veranstaltungsort für private Events.
Im Dezember 2009 pachtete der Event-Impresario und Gastronom Barton G. Weiss das Anwesen und übernahm die Mansion, prägte dem geschichtsträchtigen Haus seinen eigenen Stil auf und eröffnete als The Villa by Barton G. Im September 2013 ersteigerte ein Unternehmen aus Florida, das mit Jordache Enterprises verbunden ist, die Villa für 41,5 Millionen Dollar.
Die Legende behauptet, dass Casa Casuarina der ursprüngliche Name war, der dem Haus gegeben wurde, als es 1930 als Hommage an den einzigen verbliebenen Baum auf dem Grundstück nach dem Hurrikan von 1926, der Südflorida traf, gebaut wurde. Freeman war gezwungen, den Baum zu fällen, um Platz für den Bau seines neuen Hauses zu schaffen. Casuarina esquisetifolia ist der botanische Name des tropischen Baumes, der im Volksmund als „Australische Kiefer“ bekannt ist.
Der Boden ist ein Muster aus Dreiecken und Rauten in Kreisen um die Muscheln und Perlen in der Mitte.