Muzeum je věnované zejména zdejším pobytům skladatele, který si toto místo značně oblíbil a získával tu inspiraci k tvorbě. Pobýval tu asi dvacet let. Zámecký areál ve Vysoké u Příbrami byl postaven v roce 1878 hrabětem Václavem Kounicem a veřejnosti je otevřen celoročně.
Nejnovější expozice z roku 1994 přibližuje osobnosti původních majitelů manželů Kounicových, rozsáhlejší část informuje návštěvníky o životě, díle a pobytu Antonína Dvořáka. V zámečku je koncertní síň a knihovna, krátkodobým výstavám slouží nově otevřená Galerie Václava Kounice. V roce 1997 se památník zúčastnil finále soutěže o cenu Evropské muzeum roku ve švýcarském Lausanne. V roce 2009 získal soubor lokalit ve Vysoké u Příbrami, spojených s Dvořákovým pobytem a jeho světově oceňovanou tvorbou, titul Evropské dědictví (European Heritage Label). S prostředím tohoto kraje je neodmyslitelně spjato zralé a vrcholné období Dvořákovy skladatelské tvorby. Počínaje Kvartetní větou F dur z října 1881 až po operu Armida z července 1903. Zde zkomponoval, započal či dokončil přes třicet nových děl a řadu dřívějších skladeb upravil a přepracoval. Z těch významnějších jsou to například opery Dimitrij, Jakobín, Čert a Káča a Rusalka...