Die Burganlage Matrei Trautson wurde im Jahre 1221 von Graf Albert III von Tirol errichtet. Als der letzte männliche Nachkomme dieses Adelsgeschlechts 1360 verstarb, fiel die Burg seiner Tochter Anastasia zu. Sie war mit Hans Trautson von Sprechenstein verheiratet, wodurch die Burg ihren heutigen Namen „Burg Trautson“ erhielt. In den kommenden Jahrhunderten wurde die Anlage ausgebaut und erweitert. Nach verschiedenen Besitzern kaufte Anton Trautson die Burg seiner Ahnen zurück. 1775 brachte sie Maria Josepha von Trautson in ihre Ehe mit Karl Joseph Fürst Auersperg ein – in deren Familienbesitz sie sich noch immer befindet. Die Burganlage wurde kurz vor Kriegsende 1945 durch amerikanische Bomber fast vollkommen zerstört. Einzig die Waschküche, einzelne Burgmauern und ein Teil der Kaplanei sind erhalten geblieben.