もともとPoquehaugとして知られていましたが、1639年にイギリス人によって入植された後、この島はミルフォード島と呼ばれました。 チャールズ・ディールが1657年に島を購入した後、チャールズ島として知られるようになった。 ディールは島でタバコを上げる試みを失敗させた。

ミルフォードのWPAの歴史は、ウィリアム-キッド船長がボストンに向かう途中の1699年にミルフォードを訪問したことを示しています（その後、海賊行為と殺人で逮捕されました）。 キッドがボストンに到着する前に、彼はロングアイランドの東端のガーディナーズ島に宝物を積み降ろし、埋葬した。 宝は彼の逮捕後に回収されたが、すべての宝がそのキャッシュにあったかどうか、そして彼がロングアイランドサウンドに沿ってそれの多くを埋めたかもしれないかどうかについての疑問が残っている。

1835年、ジョン-ハリスによって島に最初の永住権が建設されました。 彼の死後、島はいくつかの異なる所有者によって所有され、1852年にコネチカット州ウォーターベリーのエリザー-プリチャードによって購入され、大きな家を当初はチャールズ-アイランド-ハウス、後にアンサンタワエ-ハウスとして知られる避暑地に変えた。 南北戦争後、リゾートは閉鎖され、島は魚の肥料事業の拠点としてジョージ-マイルズ-カンパニーにリースされた。 マイルズ社が島を去った後、ドミニコ会が島に宗教的な隠れ家を開いた1930年代までは比較的使用されていなかった。 アクィナスの隠れ家は、礼拝堂、隠れ家のための小さなキャビン、中央の食堂、島全体の道に沿って位置する宗教的な神社で構成されていました。 この撤退は1930年代後半に閉鎖され、島にはいくつかの名残が残っています。

Modern eraEdit

コネチカット州は現在、島を所有しており、シルバーサンズ州立公園の一部です。 それはサギと白鷺の地元の鳥の人口のための自然保護区に指定されています。 ホワイトテールの鹿は一般的でしたが、島の推定16頭の鹿は、営巣鳥を保護するために、2011年に環境保護省（現在のエネルギー省）によって狩りをされました。 島の周りの海には、ブルーフィッシュ、鯛のブルース、砂のサメ、馬蹄形のカニがあります。

島の西の海域は、2013年以来、約3.4エーカー（1.4ha）の面積でカキ養殖のためのサイトとなっています。