Les restes del castell, molt arruïnat, s’aixequen aturonades als vessants meridionals de Montagut, en un replà, damunt el santuari de Bell-lloc. Un recinte fortificat protegia amb valls els costats N i W i encerclava els edificis centrals; a la part cen tral hi ha restes de la torre mestra i al SE es conserven parts de dues torres rectangulars (ara d’uns 7 m) que devien flanquejar l’entrada. Al NE hi ha una altra torre rectangular, sencera. Esmentat des del 1276, fou volat el 1812 durant l’ocupació francesa.