Il palazzo fu eretto nel XV secolo dalla casata dei Brancaccio, ed è una testimonianza della Napoli quattrocentesca: infatti possiede molti rifermenti all'architettura catalana. Nel 1690 qui fu aperta la prima biblioteca pubblica della città e nel Settecento l'edificio venne rimaneggiato; nel cortile è presente un portico su cinque archi decorati con stucchi in funzione di proteggere la scalinata di accesso alla biblioteca.