N'era el centre històric el castell de Rebollet (dins el terme de la Font d’En Carròs), d’origen islàmic, esmentat des dels terratrèmols del 1598, que Jaume I donà el 1240 al noble d’origen germànic Carròs. Fou tercer senyor de la baronia de Rebollet el seu net l’almirall Francesc Carròs i de Cruïlles (mort vers el 1339), que fou succeït pel seu fill Francesc (mort el 1343), per la filla d’aquest, Joana (morta després del 1350), casada amb Ramon de Boixadors. De la filla d’aquest, Alemanda Carròs, casada amb Berenguer de Vilaragut (que el 1368 refeu el castell, destruït pels castellans el 1344, durant la guerra dels Dos Peres), passà als nets de Francesca Carròs, filla de l’almirall i muller de Ramon de Riu-sec; Ramoneta de Riu-sec es casà amb Pere de Centelles (mort els darrers anys del segle XIV), i la baronia de Rebollet, juntament amb la de Nules, passà als Centelles, que s’intitularen senyors de les baronies de Rebollet i d’Oliva. El 1449 Alfons IV creà per a Francesc Gilabert de Centelles i de Queralt el comtat d'Oliva.