Il Palazzo fu costruito intorno al 1580, quando Papa Gregorio XIII volle dare al complesso minerario una sede prestigiosa per la direzione e gli alloggi dell’appaltatore, del governatore e dele varie personalità pontificie. Per questo fu chiamato “Palazzo di Governo” e solo in seguito prese il nome di “Palazzo Camerale”.
Oggi il Palazzo ospita anche il Museo civico ” Klitsche de La Grange” che racconta le trasformazioni dei Monti della Tolfa, dalla preistoria all’ età moderna.