Siedziba Muzeum Literatury mieści się na Rynku Starego Miasta 20 w Warszawie. Tutaj znajdują się wszystkie działy i pracownie muzealne, w tym Biblioteka, sala audiowizualna oraz sale wystawiennicze. W kamienicy balcerowskiej zachowały się fragmenty gotyckich murów i malowidła ściennego z Trzema Królami datowanego na 1515 rok. Muzeum zajmuje także dwie kamienice przy ulicy Brzozowej. Wejście główne do muzeum znajduje się od strony Rynku Starego Miasta.