Die ausgedehnte Anlage war bis 1513 im Besitz der Grafen von Tirol, danach kam das Schloss in den Besitz der Grafen Khuen-Belasi, denen es (seit dem 19. Jh. Zur Ruine geworde) heute noch gehört. Der prächtige Freskenzyklus (1400) wurde größtenteils 1912 abgelöst und in das Museum Ferdinandeum in Innsbruck übertragen.