L'ampia costruzione fu di proprietà dei Conti del Tirolo fino al 1513, in seguito proprietari del castello divennero i Conti Khuen-Belasi ai quali il castello appartiene ancora oggi. Dal XIX secolo il castello è andato in rovina. Nel 1912 la maggior parte degli affreschi (del 1400) sono stati trasferiti nel Museo "Ferdinandeum" di Innsbruck.