de legende stelt dat dit kleine eiland verbonden met Milford door een zandbank onder een vloek is geplaatst, niet een keer, maar driemaal-en kan nog steeds een lang verloren piratenschat bevatten.
het bescheiden 14 hectare grote eiland, nu de thuisbasis van broedvogels, is doordrenkt van lokale legende en overlevering die het gebrek aan permanente bewoning op het eiland de schuld geeft van oude vloeken die nog steeds van kracht zijn.De eerste vloek die op het land werd gelegd was door de plaatselijke leider van Paugusset in 1639, toen hij het land verhandelde aan Europese kolonisten, blijkbaar niet zonder kwade wil. Anderen zeggen dat de chef boos was over de ontvoering van zijn dochter of een andere klacht. Soms zijn vloek details vaag.
In 1699 kwam de beroemdste bezoeker van het eiland langs, begroef een schat en vervloekte de grond waarin het zat. De Schotse piratenkapitein William Kidd was op zijn laatste reis van zijn carrière toen hij het gebied bezocht, net voordat hij in een val werd gelokt die leidde tot zijn proces en executie. Het is bekend dat hij schatten begroef op Gardiner Island in New York, maar men dacht dat de slimme piraat misschien gedacht had om zijn buit te verdelen, met een deel hier opgeslagen.
als de eerste twee vloeken een beetje vergezocht zijn, dan is het de derde die echt de verbeelding rekt: het betrof ook schat-deze keer, behorend tot een Mexicaanse keizer. Deze schat zou ooit toebehoord hebben aan Guatmozin, de 16de eeuwse Mexicaanse keizer die Montezuma opvolgde. Tijdens de verovering van Mexico werd Guatmozin gevangengenomen en gemarteld door de Spaanse conquistadores onder Cortez, die eisten te weten waar de schatten van de Azteken verborgen waren. Guatmozin werd in 1525 geëxecuteerd zonder ooit zijn geheimen te hebben opgegeven.
volgens het verhaal, in 1721 een groep van Connecticut matrozen struikelde over deze schat, verstopt in een grot in Mexico, en keerde terug naar huis met het. Een reeks rampen overkwam de mannen, wat leidde tot de dood van vier van de vijf Ontdekkers. In paniek nam de laatste man die stond zijn buit mee naar Charles Island, waar hij het begroef en zo zijn vloek overbracht naar het eiland.
ondanks generaties schatzoekers die proberen de verborgen buit te vinden, is er tot nu toe geen schat gevonden.In de loop der jaren werd Charles Island beschouwd als een plaats voor een jachtclub, een pretpark, militaire installaties in de Eerste Wereldoorlog en een kerncentrale, maar tegenwoordig maakt het deel uit van Silver Sands State Park en fungeert het als een natuurreservaat, de thuisbasis van Connecticut ‘ s grootste broedkolonies van reigers en zilverreigers. Bezoekers die op zoek zijn naar schatten worden gewaarschuwd om op hun hoede te zijn voor de kracht van de getijden die het eiland van het vasteland scheiden.