Stavba sněhobílého zámku byla zahájena v roce 1785, ale až na počátku 19. století získala panství známá rodina Brunsviků, která po desetiletí utvářela podobu budovy s původně barokními prvky. Na konci století jej koupil pivovarník Antal Dreher a později během světové války byl přestavěn na vojenskou nemocnici. Hrad i panství dnes spadají pod Maďarskou akademii věd. Nejkrásnějším prvkem zámku je 70 hektarová anglická zahrada, v níž její tvůrce Ferenc Brunszvik vysadil zvláštní stromy, jako jsou zakrslé mandloně, cedry a cypřiše. Zahradním architektem anglické zahrady nebyl nikdo jiný než Heinrich Nebbien, který se zasloužil také o návrh Městského parku, Városliget v Budapešťi. Zajímavostí parku je, že vodu potoka Svatého László, který jím protéká, rozvodnili a uprostřed vzniklého jezera vytvořili ostrov. Na ostrově je také venkovní jeviště, kde se pravidelně konají hudební představení.
A jak s tím tedy souvisí Beethoven?
Podle písemných dokumentů navštívil Beethoven Martonvásár třikrát, aby vyučoval dvacetileté Brunsvikovy dcery. Ačkoli Beethoven nerad učil, - říkával, že ti, kteří neumějí tvořit hudbu, by ji měli učit -, u dcer Antala Brunsvika Teresy a Josefíny udělal výjimku. Díky výuce vznikl mezi ním a rodinou přátelský vztah a dívčin bratr Ferenc se stal vážným mecenášem skladatele. Beethoven mu věnoval svou Appassionatu, kterou dokončil v parku zámku v Martonvásáru - podle legendy ji dokončil na ostrově pod velkým topolem. Tento zvláštní vztah připomíná Beethovenova výstava na zámku, kde je mimo jiné k vidění skladatelův klavír a dopisy Josefíně. Obdivovat můžete také vskutku bizarní artefakt, přívěsek, do kterého byly zasazeny Beethovenovy vlasy.