De retour à Vienne en 1793, Haydn acheta cette maison qui plaisait beaucoup à sa femme dans un quartier alors tout récent. Il y a vécu encore de nombreuses années et y a composé ses deux plus grands oratorios, La Création en1798 et Les Saisons en 1801. De nombreux souvenirs de Brahms qui s'est installé à Vienne de 1869 à sa mort en 1897 sont également exposés par ce musée créé en 1899.