Palazzo Ramirez-Montalvo è uno splendido ed antico edificio di particolare interesse storico-artistico. Nel 1558 fu acquistato da Antonio de Montalvo uno dei cortigiani prediletti da Cosimo I.
Il Montalvo, ampliato il suo possesso con l'acquisto di alcune piccole case vicine, incaricò Bartolomeo Ammannati di riunire in un unica facciata le case acquistate. Una particolare attenzione merita la decorazione della facciata che su disegno del Vasari fu eseguita qualche anno dopo forse dal giovane Poccetti.

Per tre secoli i Ramirez restarono in possesso del loro palazzo;in questo lungo periodo si può rilevare che due volte soltanto il quartiere nobile fu dato in affitto a persone di un certo rilievo.

Il ramo maschile della famiglia Ramirez si estinse alla metà dell'ottocento. Gli affreschi a soggetto allegorico che decorano gli ambienti al primo piano furono eseguiti tra il 1815 e il 1820 dal pittore pratese Luigi Catani (1762-1840).
Il palazzo lasciato in completo abbandono per quasi un secolo fu acquistato da una società immobiliare ed è oggi di proprietà di Pandolfini Casa d'Aste.