Forse già in epoca romana esisteva in questo punto una torre di avvistamento, ma le prime notizie di una fortificazione risalgono al IX sec. Il fortilizio fu potenziato dai Visconti e ampliato dalla Repubblica Veneta e infine unito al forte di San Marco tramite strada coperta. Il complesso fu più volte modificato. Oggi è un parco pubblico con vista spettacolare sulla pianura e sulla catena delle Prealpi bergamasche.