Commissionato nel 1600 all’architetto Domenico Fontana dal viceré Ferdinando Ruiz de Castro, conte di Lemos, doveva ospitare un’attesa visita di Filippo III di Spagna che non ebbe mai luogo. Durante il decennio francese fu arricchito da Gioacchino Murat con decorazioni neoclassiche e, successivamente, restaurato da Gaetano Genovese che reintegrò i danni causati dall’incendio del 1837. L’edificio oggi ospita il Museo dell’Appartamento Storico e la Biblioteca Nazionale Vittorio Emanuele III.