El lloc de Peraltes, situat a l’esquerra del Sió, constitueix una caseria emplaçada al nord del poble d’Ossó de Sió, cap del municipi. De l’antic castell de Peraltes, avui totalment desaparegut, hi ha referències a la segona meitat del segle XII, quan el terme era posseït pels senyors de Seró. L’any 1172 en el testament sacramental de Ramon Bernat de Seró, jurat sobre l’altar de l’església de Santa Maria del castell de Biosca, s’establí que el castell de Peraltes fos llegat a Guillem i Pere, possiblement fills del difunt. Pocs anys més tard, en el testament de Pere de Seró del 1188, aquest determinà que el domini eminent del castro Parietis altibus fos donat al retaule de Santa Maria de la Seu (“ad tabulo Sancte Marie Sedis’’) i que elstemplers, que tenien el terme infeudat, hi conservessin els drets.