In het jaar 1300 kwam kasteel Rosendael in bezit van de graven en later hertogen van Gelre. Van de 20 kastelen in het hertogdom was Rosendael bij veel hertogen favoriet, vanwege de mooie ligging aan de rand van de Veluwe.
Donjon
Het Middeleeuwse complex omvatte een voorburcht, een hoofdburcht en forse donjon. Alleen de donjon heeft de tand des tijds overleefd. Hij heeft muren tot 4 meter dik en was in geval van belegering het laatste toevluchtsoord voor de hertog. In zijn soort is het de grootste toren van Nederland, al was hij oorspronkelijk bijna twee keer zo hoog.
De knieval
Tot de 16e eeuw verbleef de hertogelijke familie geregeld op het kasteel. Maar toen keerde het tij. In 1502 veroverde Filips de Schone de stad Arnhem en kasteel Rosendael. Toen Filips in 1506 overleed, wist Karel het grondgebied van het hertogdom weer terug te veroveren. Het koste hem veel geld. In 1516 moest hertog Karel zijn lievelingskasteel daarom verpanden en later zelfs verkopen. Een paar jaar later overleed hij en was het snel gedaan met de onafhankelijkheid van het hertogdom. Kasteel Rosendael kwam in handen van verschillende adellijke families die er bijna 400 jaar zouden wonen.
Vredig landhuis
In 1722 werd tegen de toren een vierkant huis gebouwd. Een eeuw later werden de zijvleugel en het koetshuis gebouwd. Daaromheen werden prachtige tuinen aangelegd. De Franse tuinarchitect Daniel Marot (de ontwerper van de tuinen van Het Loo) ontwierp de schelpengalerij, de Bedriegertjes en de theekoepel. Zo kreeg het Middeleeuwse kasteel het karakter van een vredig landhuis.
WOII
IN WO II werd Rosendael zwaar getroffen. In 1977 kwam door het overlijden van baron van Pallandt een einde aan de particuliere bewoning. In de jaren tachtig van de 20e eeuw werd kasteel Rosendael gerestaureerd en opengesteld voor het publiek.
