legenda tvrdí, že tento malý ostrov spojený s Milfordem sandbarem byl podroben kletbě, ne jednou — ale třikrát-a může stále držet dlouho ztracený pirátský poklad.
nenáročný ostrov o rozloze 14 hektarů, nyní domovem hnízdících ptáků, je ponořen do místní legendy a tradice, která obviňuje nedostatek trvalého osídlení na ostrově ze starých kleteb, které stále platí.
první prokletí položené na zemi bylo místním Paugussetským náčelníkem v roce 1639, když vyměnil zemi Evropským osadníkům, zjevně ne bez nějaké špatné vůle. Jiní říkají, že šéf byl rozrušený kvůli únosu své dcery nebo nějaké jiné stížnosti. Někdy jsou detaily prokletí nejasné.
v roce 1699 se nejslavnější návštěvník ostrova zastavil a údajně zakopal poklad a poté proklel zemi, ve které seděl. Skotský pirátský kapitán William Kidd byl na své poslední plavbě své kariéry, když navštívil oblast, těsně předtím, než byl nalákán do pasti vedoucí k jeho soudu a popravě. Je známo, že pohřbil poklad na Gardiner Island v New Yorku, ale to bylo si myslel, že canny pirát možná myslel rozdělit svou kořist, s částí schovanou zde.
pokud jsou první dvě kletby trochu přitažené za vlasy, je to třetí, které opravdu táhne představivost: zahrnovalo také poklad-tentokrát patřící mexickému císaři. Tento poklad údajně kdysi patřil Guatmozinovi, mexickému císaři ze 16. století, který následoval Montezumu. Během probíhajícího dobývání mexických zemí byl Guatmozin zajat a mučen španělskými conquistadory pod Cortezem, kteří požadovali vědět, kde jsou skryté poklady Aztéků. Guatmozin byl popraven v roce 1525, aniž by se vzdal svých tajemství.
podle příběhu v roce 1721 narazila skupina námořníků z Connecticutu na tento poklad, uložená v jeskyni v Mexiku a vrátila se s ním domů. Řada katastrof postihla muže, což vedlo ke smrti čtyř z pěti objevitelů. Poslední stojící muž v panice vzal svou kořist na Karlův ostrov, kde ji pohřbil a přenesl tak její prokletí na ostrov.
navzdory generacím hledačů pokladů, kteří se pokoušejí najít skrytou kořist, dosud nebyl nalezen žádný poklad.
v průběhu let byl Charles Island považován za místo pro jachtařský klub, zábavní park, vojenská zařízení v první světové válce a jadernou elektrárnu, ale dnes je součástí státního parku Silver Sands a působí jako přírodní rezervace, domov největších chovných kolonií volavek a volavek v Connecticutu. Návštěvníci hledající poklad jsou varováni, aby si dávali pozor na sílu přílivu a odlivu, které spěchají, aby oddělily ostrov od pevniny.