Die Herren von Degenberg übernahmen im 14. Jahrhundert Drachselsried, bauten ihr Gut zum Edelsitz ihrer dortigen Hofmark aus, und begründeten dort Anfang des 16. Jahrhunderts ihre eigene Brauerei (ähnlich wie auf anderen ihrer Güter). Ein Schlossgebäude wird erstmals 1717 erwähnt, das heutige barocke Hofmarkschlossgebäude geht auf die 2. Hälfte des 18. Jahrhunderts zurück und wurde nach Ende seiner Nutzung als Schloss in die Brauerei integriert und zur Gaststätte umfunktioniert. Die Hofmark wurde als Herrschaft 1848 aufgelöst.