Ben visibile da molte località della Val di Non, Castel Valer si distingue per la sua imponente mole di pietra grigia, per le innumerevoli finestre dalle imposte bicolori e per i caratteri architettonici, che presentano due peculiarità: la pianta ottagonale del mastio e la suddivisione del complesso edificiale in due corpi perfettamente autonomi tra loro: Castel di sopra e Castel di sotto, ai quali si aggiungono la cappella di San Valerio e i rustici esterni.

Al castello si giunge attraverso due vie, entrambe sterrate: la prima sale da Tassullo attraverso i frutteti, la seconda strada scende da Sanzenone attraverso appezzamenti agricoli un tempo di proprietà della famiglia Spaur e attualmente sono coltivati a meleto.
Le due strade convergono in un antico ponte di pietra attraverso il quale si accede al castello.

All’esterno del castello, nel giardino settentrionale si trova la cappella di San Valerio, risalente al XV secolo.

Il tetto a due spioventi è sormontato da un piccolo campanile in legno.
Lo spazio interno si articola in due vani contigui a pianta rettangolare voltati a crociera: l’aula per i fedeli e il presbiterio, separati dall’arco santo a sesto acuto.
Il presbiterio presenta una decorazione pittorica ad affresco eccezionalmente ben conservata, con un complesso programma iconografico attribuito ai fratelli Giovanni e Battista Baschenis, noti pittori di origine bergamasca, e un ignoto pittore tirolese.

Castel di sopra è il corpo di fabbrica posto più in alto del complesso castellare: fu la dimora della linea Spaur di Obervaler, tuttora fiorente in Austria, che per secoli vi condusse una vita del tutto autonoma rispetto agli abitanti di Castel di sotto.

Il cortile superiore è chiuso a ovest da un corpo di fabbrica recante in facciata lo stemma Spaur di Obervaler, raffigurato a rilievo su lastra metallica.

Castel di sopra è il corpo di fabbrica posto più in alto del complesso castellare: fu la dimora della linea Spaur di Obervaler, tuttora fiorente in Austria, che per secoli vi condusse una vita del tutto autonoma rispetto agli abitanti di Castel di sotto.Il cortile superiore è chiuso a ovest da un corpo di fabbrica recante in facciata lo stemma Spaur di Obervaler, raffigurato a rilievo su lastra metallica.