Adquirida en 1593 por Pier Francesco de’ Medici, bajo Cosimo I fue sede de los comendadores de la Orden de Santo Stefano. El Gran Duque Fernando II de’ Medici la concedió luego a Eleonora Ramirez de Montalvo que, desde 1650, la destinó como retiro campestre de la Congregación que ella instituyó, las Montalve, destinada a la educación de jóvenes nobles. En 1724 Anna Maria Luisa, última descendiente de la familia Medici, se trasladó a La Quiete y dotó a la villa de un jardín a la italiana, para el cual contó con el asesoramiento de Sebastiano Rapi, jardinero de Boboli.
En la planta baja del Conservatorio se encuentra una farmacia histórica. No está claro si fue construida simultáneamente con la fundación del Instituto o en época posterior, aunque algunos objetos, pertenecientes a su dotación y datables a finales del siglo XVII, hacen suponer una actividad ya desde ese período.
Cesaró su actividad con la supresión del Instituto en época napoleónica. El mobiliario, constituido por una serie de armarios con puertas de cristal y un mostrador con encimera de mármol, se caracteriza por la sencillez del conjunto con muy pocos elementos decorativos. Interesante es la dotación cerámica y vítrea que testimonia la actividad realizada entre finales del siglo XVII y principios del XIX: está compuesta por algunas botellas redondas con tapón, albarelos, frascos de cerámica blanca, vasos en forma de urna y otros vasos de manufactura de Doccia.
Hoy es sede del Centro de Cultura para Extranjeros adscrito a la Universidad de Florencia.
