Das Gebäude hat viel Geschichte – erwähnt wurde das Schloss St. Martin erstmals im 11. Jahrhundert. Lange im Besitz des Stifts Admont wurde St. Martin im Jahr 1919 vom Land Steiermark gepachtet und später gekauft. Gründer Josef Steinberger machte St. Martin zur Wiege der bäuerlichen Volksbildung.