Construit sur une colline rocheuse et abrupte, le château a été agrandi au XIIème siècle par l'archevêque de Narbonne, Guillaume de Broa. Au XVIème siècle, Richelieu ordonna la destruction de l'édifice qui fut, ensuite, laissé à l'abandon. Aujourd'hui, le village de Gruissan entoure les ruines du château.
Le site de la tour offre un panorama assez spectaculaire, on peut y admirer tout le village ainsi que la côte, l'étang, les marais salants et le port de Gruissan. La tour et les ruines du château sont classés comme monuments historiques par le ministère de la culture française.