«Corte e castello già nell’XI secolo divennero capoluogo di comunità nel 1774. Il castello di Pergine, menzionato per la prima volta in un documento del 1056, appartenne originariamente alla Badia di Prataglia. Passato quindi nel corso del XII secolo sotto il dominio della Badia di Agnano, entrò a far parte dello stato fiorentino.
Nel 1568 Cosimo I dei Medici pose sotto la sua signoria le cinque comunità che costituivano il territorio dell’abbazia, e cioè Badia di Agnano, Migliari, Montozzi, San Pancrazio e Pergine, creando in quella circostanza un corpo comunitativo che si disse dei “Cinque comuni distrettuali della Valdambra”».