Nach Zerstörung der Stollburg kaufte Fürstbischof Julius Echter 1575 das Schlossgut den Truchsessen von Henneberg ab. In der Folgezeit bis um etwa 1604 ließ er das Gebäude umbauen. Für das Hochstift wurde für 6729 Gulden im Jahre 1614 ein Amtshaus errichtet.
Im Sommer 2018 wurde die Gemeinde auf Basis eines Erbbaurechtsvertrags Schlossherrin für die nächsten 99 Jahre.