La costruzione viene con ragionevole certezza fatta risalire al 1237 ad opera dei fratelli Friedrich e Beral von Wangen (Vanga). Già nel 1274 il castello fu gravemente danneggiato da un assedio da parte di Mainardo II conte di Tirolo, alla fine del quale cadde. Mainardo concesse il maniero ad un suo protetto, Gottschalk Knoger.

Nel XIV secolo il castello fu ricostruito. Nel 1385 fu acquistato dai fratelli Franz e Niklaus Vintler, i quali cominciarono la ristrutturazione e (nel 1388) gli affreschi (i cui autori sono ignoti). Nel 1390 fu consacrata la cappella. In seguito il castello passa di mano a Sigismondo il Danaroso. Per due anni - su concessione dei Tirolo - (1463-1465) è sede del principe-vescovo di Trento.

I Tirolo affidarono il castello nel 1500 a Georg von Frundsberg, il "padre dei Lanzichenecchi". Sotto la sua cura, nel 1520 la polveriera esplose, danneggiando la torre, il muro di cinta e parte del palazzo. Lo stesso Frundsberg rimase ucciso. L'opera di ricostruzione terminò nel 1531.

Un secolo dopo comincia il declino. Un incendio (1672) distrugge il palazzo orientale, che non venne ricostruito. Nel 1759 l'ultimo dei Liechtenstein-Castelcorno rifiutò il feudo, che tornò sotto il controllo del principe-vescovo di Trento. Nel 1833 il re di Baviera Ludovico I vi soggiornò, firmando per primo il libro degli ospiti che è conservato ancora oggi. Nonostante l'interesse dei romantici tedeschi (il castello ne divenne un simbolo), il declino continua: nel 1868 una parte della casa d'estate crollò durante la costruzione della nuova strada per Sarentino.

All'interno del castello - completamente visitabile - rimane molto poco dell'originario allestimento. Tuttavia rimane comunque un maniero molto ben conservato e una visita merita il ciclo di affreschi che narrano scene di vita cortese, episodi di caccia, tornei cavallereschi e momenti di vita quotidiana. Non mancano gli spunti letterari come la rappresentazione dell'avventura di Tristano ed Isotta e quelle di Re Artù con i suoi cavalieri della tavola rotonda. Trattasi del ciclo di affreschi a soggetto profano più grande e meglio conservato del Medioevo.