Il borgo di Faleria, anticamente chiamato Stabia, dall’analisi di documenti della fine del X secolo, risulta essere già fortificato per la presenza di un castrum. Il borgo, i cui diritti appartenevano nell’XI secolo al Monastero di San Gregorio al Celio di Roma, fu dominio della potente e nobile famiglia degli Anguillara a partire dal XII secolo che lo tennero a fasi alterne per lungo tempo, fino a passare nel 1660 ai Borghese. Il castello deve la sua origine alla famiglia degli Anguillara che lo costruirono verso la fine del Duecento. Esso era composto da un recinto quadrangolare con due torri ed alcuni semplici corpi di fabbrica, tra i quali una cappella. Alla fine del Quattrocento Flaminio Anguillara iniziò una fase di ristrutturazione del vecchio maniero, trasformandolo in palazzo gentilizio. Fu così che vennero inglobate nella nuova fabbrica, quasi tutte le strutture militari difensive, dalle merlature alle torri. Sopravvivono però notevoli tratti di murature originarie dove vennero aperti ampi finestrati e balconi, e la caditoia sopra il portale d’ingresso. Venne creato un elegante cortile con loggiato e uno scalone d’onore. Nello stesso periodo il vecchio castello inglobò anche parte delle strutture civili e militari limitrofe.