D’aquest castell, situat vora l’església de Sant Pere, hi ha documentació a l’Arxiu Diocesà de Solsona, tot i que és indirecta, ja que consta d’una sèrie de donacions i vendes de terres que termenejaven amb el castell de Miraver o que hi eren dins. Les dades són dels anys 1014, 1015, 1068, 1070 i 1098 en la donació que Ramon, senyor de Miraver, fa de l’església. Aquesta senyoria passà al seu fill Pere i al fill d’aquest, Ramon Pere, i la seva muller Agnès l’any 1150 i a Ramon de Vilaró l’any 1227. De manera directa en tenim constància en un document del 7 de juny de 1199, en el qual Ponç de Pinell donà (en capítols matrimonials) la seva filla Ermessenda a Guillem de Roca, dotant-la amb els castells de Pinell, Miraver i Sant Climenç. El 4 de desembre de 1375, en formar-se el nou comtat de Cardona pel rei Pere III, passà a estar-hi subjecte.