Un édifice médiéval existait dès 1580. Il fut remanié par le Cardinal de Richelieu en 1635 en même temps que les forts de l'Estissac, de l'Éminence et de Port-Man afin de constituer un ensemble défensif homogène. À cette époque le fort était habité en permanence ; il servait de logement pour le commandant et les soldats et de magasin pour l'artillerie et les vivres...