Остров на Гудзоне был куплен в 1900-ом году шотландским иммигрантом Фрэнсисом Баннерманом, который построил на нём замок, предназначенный для хранения огромной коллекции оружия (он зарабатывал его продажей). В 1918-ом году, через 2 года после смерти шотландца, имевшиеся на территории замка боеприпасы взорвались и уничтожили часть сооружения. Спустя почти полвека, в 1969-ом году, случился пожар, в результате которого сгорела кровля и часть полов. Сам остров считается необитаемым с 1950-го года, когда во время одного из штормов затонул паром, который его обслуживал. В 2009-ом году оставшаяся часть замка Баннермана рухнула.