Brivio è stato una città di confine, dato che l'Adda faceva da confine di stato tra il Ducato di Milano e la Serenissima Repubblica di Venezia. Il nucleo di Brivio era comunque già abitato in epoca romana. In primo piano il castello di Brivio con due delle sue quattro torri, il castello era a difesa del porto e del guado.
