O castelo tem planta trapezoidal, composta por quatro alas desenvolvidas à volta de pátio central, uma delas já desaparecida, com torres nos ângulos e com a torre de menagem na face exterior da ala virada à vila, envolvido por barbacã com possantes cubelos semicirculares, formando quase tambores. Do castelo, destaca-se a torre de menagem, larga e alta.

Com origem na idade média, o Castelo de Bragança testemunha a vontade da instituição régia de ter um centro regional dominante na zona mais periférica do reino, procurando estreitar relações entre a casa real e a família dominante na região, bem como dotar a vila de estruturas defensivas e incentivos para o seu repovoamento, como comprova o foral de D. Sancho I, em 1187.