L’une des six tours côtières de guet élevées pour défendre le promontoire du Circeo, construite en 1562 sur ordre du pape Pie IV, qui par un bref pontifical chargea les seigneurs de Sermoneta et de San Felice (les Caetani) de réaliser les quatre premières tours du système défensif, dont celle-ci à Cala Cervia. Endommagée au fil des siècles, la tour est aujourd’hui en ruine, au point d’être surnommée « La Torraccia » (la vilaine tour) ; en 1811, les troupes françaises en garnison à San Felice construisirent à proximité une batterie pour la remplacer dans sa fonction défensive désormais compromise.
Ces terres appartenaient aux États pontificaux, à la fin du XVIe siècle. Il fallait à la fois surveiller les incursions des Barbaresques et des Turcs et protéger les navires qui traversaient le golfe en route de Naples et de Sicile vers Rome. Pour contrôler et défendre le territoire, le pape Pie IV ordonna à Niccolò et Bonifacio Caetani (seigneurs de Sermoneta et San Felice) de construire à leurs frais quatre tours (Torre Paola, Torre Moresca, Torre Cervia et Torre Fico) permettant de surveiller la côte, l’arrière-pays et le trafic maritime. Cette tour, avec Torre Moresca, fut bâtie plus à l’intérieur que Torre Paola et Torre Fico, aux points du promontoire les plus exposés aux attaques des pirates ; toutes deux sur des pointes rocheuses, sauf Torre Cervia. On y entrait par le premier étage grâce à une passerelle en bois qui, une fois relevée, rendait l’accès plus difficile. Depuis sa construction (1839), les textes locaux citent souvent des soldats la défendant contre des attaques par mer et par terre. En 1809, des navires anglais attaquèrent la côte pour la deuxième fois (pour le premier affrontement, voir Torre Vittoria) et causèrent d’importants dégâts. Les Anglais mouillèrent juste au large de cette tour et débarquèrent quelque quatre-vingts marins, qui s’emparèrent de la tour sans combattre : ils connaissaient semble-t-il le commandant qui tenait alors Torre Cervia. De là, ils gagnèrent Torre Fico, qu’ils assiégèrent rapidement (cette fois en escaladant le mur et en s’emparant des canons de la plate-forme). Ils occupèrent bientôt aussi Torre Moresca (laissée sans défense pour protéger les autres tours !). On ouvrit alors le feu et les tours furent détruites : Torre Cervia et Torre Fico furent endommagées, Torre Moresca rasée. Ils attaquèrent ensuite (ou en même temps) Torre Paola, mais là les Anglais furent battus et contraints de reculer. La tour ne fut reconstruite qu’en 1947 grâce au comte Galeazzi, mais sans respecter le projet d’origine. Il manque le bouclier qui protégeait la plate-forme du côté de la montagne ; à la place du pont-levis, on a construit un escalier (plus commode), et une véranda semi-circulaire à la base côté mer change son aspect : comme l’écrit Lanzuisi, « elle donne à la tour l’allure d’une matrone ventrue ceinte d’une voyante jupette… crénelée ». Depuis 1978, la tour est une propriété privée ; elle a été reconstruite dans les années 1950 d’une manière qui a complètement altéré la lecture de son plan d’origine.