Het poortgebouw uit 1653 werd gebouwd op de fundamenten van een voormalig kasteel. Daarna, rond 1664, werd de bouw gestart van het hoofdgebouw. Dit gebouw is omgeven door een binnen- en een buitengracht. Ook het koetshuis wat tegenover het kasteel is gebouwd komt uit die tijd.
Het complex werd in 1976 aangekocht door het Limburgs Landschap. In 1986 startte een complete restauratie van de gebouwen en ook de tuinen werden opnieuw ontworpen.
In 1988 vond de opening plaats van ‘Kasteeltuinen Arcen’ door Prins Bernhard. In het gebouw is een trouwlocatie gevestigd en kunnen ruimten worden afgehuurd voor feesten.
Ook de mooie tuinen met de rozentuin en de Japanse tuin is een echte bezienswaardigheid. Er zijn meerdere eet en drinkgelegenheden op het park.
