Det storslagna hemmet som nu är känt som Audubon House byggdes av kapten John Huling Geiger på 1840-talet som en bostad för hans familj, som bodde där i mer än ett sekel. Geigers herrgård, planerad att förstöras 1958, räddades av Mitchell Wolfson Family Foundation, en ideell utbildningsorganisation. Hemmets storskaliga restaurering var den första i sitt slag i Key West och utlöste Key Wests restaureringsrörelse.

Idag återspeglar hemmet och dess inredning elegansen och det bekväma livet som en rik familj i Key West åtnjöt i en tid då frekventa skeppsvrak på offshorerevet skapade en blomstrande skeppsbrottsindustri.