Гористая и неприступная с севера и с единственной удобной гаванью Бастер на юге, Тортуга служила буканьерам надёжным убежищем. В 20-е годы XVII века охотники построили там небольшой посёлок близ гавани, в котором сдавали жильё заезжим торговцам. Охотники с Тортуги стали подрабатывать пиратством, а после того как в конце 20-х годов в этом районе могущество Испании было существенно подорвано голландскими флотилиями, из гавани Тортуги стали совершать регулярные рейды флибустьеры. Французские поселенцы на Тортуге запросили помощи у официальных властей Франции, в результате чего в 1640 году на остров был направлен гугенот Франсуа Ле Вассёр. Будучи прекрасным военным инженером, Ле Вассёр построил на Тортуге крепость, защищавшую гавань Бастер, после чего оборвал все связи с Францией, и следующие 10 лет Тортуга служила самым настоящим притоном для пиратов и корсаров.