El terme del castell de Rajadell apareix citat el 950 (castro Agello). En canvi, dels senyors del castell no en sabem gran cosa, només que el 1025 apareix un Miró de Rajadell que no sabem si és el senyor eminent o bé un feudatari o un castlà. No és fins al 1113 que figuren com a senyors del castell de Rajadell Pere i Ramon Folc, que eren membres de la família Cardona, amb la qual la família Rajadell tingué moltes vinculacions durant els segles següents. En aquest mateix temps, al principi del segle XII, apareixen diversos personatges amb vinculacions feudals en el castell. El 1123 és Berenguer Sendred, castlà de Callús, casat amb Sicarda, un feudatari del castell de Rajadell, i el 1113 és un castlà, Ramon Tedbald. Com a senyors del castell apareixen Guillem, fill de Berenguer Sendred, l’any 1153; Guillem de Rajadell, casat amb Sibil·la, mort entre el 1273 i el 1284; i Berenguer de Rajadell, casat amb Blanca, fill de l’anterior, entre el 1273-84 i fins després del 1309. El domini del castell passà al final del segle XV als Cruïlles i després a Bernat Aymerich, que ja posseïa la parròquia de Monistrolet, per passar el segle XVIII als Pignatelli.