Der Grundstein der Burg wurde im Jahre 1882 gelegt. Für die baulichen Mittel in dieser Zeit wurde die Burg in einer Rekordzeit erbaut. Gebaut wurde Schloss Drachenburg als Wohnsitz mit besonderem Flair für den Baron und Bankier Stehpan von Sarter. Diese wohnte jedoch niemals in dem für ihn erbauten Schloss.

Das Schloss selber erlebte über die Jahre einen fast ständigen Nutzungswandel. So war das Schloss in seinen Anfangszeiten eine Privatvilla. Danach wurde es zu einer Art Museum. Einige Jahre später wurde sein Bau um nordirische Sommerhäuser erweitert. Danach wurde das Schloss zu einer Katholischen Heimschule umgewandelt. Da der katholische Glaube nicht mit der prachtvollen Innenausstattung des Schlosses in Einglang zu bringen war, wurde diese versteigert. Im Jahre 1941 wurde Schloss Drachenburg zur Adolf-Hilterschule umgebaut. Der zweite Weltkrieg hinterlies starke Spuren am Gebäude, wobei manche Teile schwer beschädigt wurden. Sechs Jahre später wurde das Schloss zur Reichsbahnzentrale umgebaut. Im Jahre 1948 wurden die Schäden des Kriegs am Schloss Drachenburg beseitigt. Ab dem Jahre 1960 stand das Scloss fast viele Jahre leeer und  wurde erst im 1973 restauriert und der Öffentlichkeit zugänglich gemacht. Seit em Jahre 1986 steht das Schloss unter Denkmalschutz