L'edificio è a pianta rettangolare, a quattro piani. È dotato di una grande corte interna (ben 1280 mqm<sup>2</sup>, attualmente sfruttati per concerti e spettacoli) circondata da un porticato a tre ordini di arcate con colonne in tufo ispirate all'arte italiana del [[Rinascimento]]. In passato il porticato era utilizzato per ospitare le merci. L'insieme è comunque eterogeneo e unisce vari stili: edifici gotici, giardini che ricordano le ville francesi con torri coronate da grosse cupole metalliche ''a cipolla''. E proprio le torri del ''Castello Stockalper'', che rappresentano il simbolo della città, sono un omaggio alla leggenda dei [[Re Magi]]: il barone Stockalper ha chiamato le tre torri con i loro nomi, dedicando la torre più grande al [[Re Mago]] ''Gaspare'', di cui lui portava il nome. Inoltre il nome [[latino]] del castello perpetua a tutti le origini delle torri: ''Domus Trium Regnum'' (la Casa dei Tre Re).
Di particolare interesse sono la ''sala signorile'' dal [[soffitto a cassettoni]] (del [[18° secolo]]), la cappella, la ''sala dei cavalieri'' (contenente una galleria di ritratti) e la ''sala dei tre Re Magi''.