Az 1860-ban leégett, a Kastélydombon álló kastély építését 1722-ben gróf Zichy Imre, Árva megyei főispán felesége, gróf Erdődy Terézia kezdte meg. A művészetpártoló földesúr, Waldstein János –felesége, Zichy Terézia révén birtokába kerülő – épület újjáépítésével 1865-ben bízta meg Yblt. Az épület ma az egyetlen Trianon múzeumnak ad helyet.
Sajnos a háború és az utána következő évek alatt számos műalkotás és a könyvtár is megsemmisült, de Pálik Béla (1845-1908) operaénekes és festőművész, Giudo Reni Auróra c. mennyezeti freskójának másolata ma is látható a múzeum épületben.