Eretto all’inizio del ‘500 per Giovanni Francesco Carafa, abate di Sant’Angelo di Atella, nel 1647 fu preso d’assalto dalla folla inferocita durante la Rivolta di Masaniello. Acquistato nel 1722 da Antonio Giudice, Principe di Cellamare, fu restaurato e ampliato da Ferdinando Fuga che progettò anche il portale d’ingresso e la cappella del Carmelo posta al pianterreno. Il palazzo ospitò illustri personalità quali Giacomo Casanova, Angelica Kauffmann e Jakob Philipp Hackert, che vi abitò con il fratello Georg tra il 1786  e il 1799.