Il museo occupa i tre piani di Palazzo Davanzati, alta e stretta dimora eretta nel XIV sec. per un ricco mercante in lana, acquistata nel XVI sec. dallo storico e uomo di lettere Bernardo Davanzati. Il palazzo fu dotato di una splendida mobilia proveniente in gran parte dal Bargello, e rievoca quindi il fascino di una ricca dimora fiorentina dell'epoca rinascimentale.