C'est à Key West que le président Truman est venu à la recherche d'un endroit pour se reposer et se détendre. Lorsque le 33e président est arrivé, il a découvert bien plus qu'un refuge insulaire paisible - il a trouvé un endroit qu'il voulait appeler chez lui.
Construite en 1890 comme quartier pour le commandant de la base navale et le maître de la paye, la petite maison blanche a pris sa place dans l'histoire très tôt. En 1912, le président William Taft a visité la maison et en 1918, Thomas Edison y a également vécu pendant plusieurs mois alors qu'il travaillait à inventer de nouvelles armes pour l'effort de guerre.
En 1946, la Petite Maison Blanche devint la maison d'hiver de Truman et il y resta 175 jours. Toujours au travail, le président a tenu diverses réunions à domicile, rencontré les chefs d'état-major interarmées et travaillé sur le plan Marshall et la doctrine Truman. Un cadre si magnifique, en fait, que Truman était connu pour passer un après-midi en ville ou sur l'eau à pêcher avec des amis. On dit qu'il était amical avec les habitants et s'intégrait parfaitement au style de vie de l'île.