Al segle XI, en la campanya per a la reconquesta i repoblament de la Catalunya Nova, el comte Ramon Berenguer I de Barcelona donà a Acard Miró, senyor de Tarroja, probablement del llinatge vescomtal de Cardona, el castell de l’Ametlla, situat aleshores a l’extrem occidental del comtat d’Osona, a la frontera amb el territori islàmic. El 1077 els comtes Ramon Berenguer II i Berenguer Ramon II confirmaren la donació amb l’obligació d’acabar la construció del castell, aleshores a mig fer i del qual es conserva, malmesa, una torre cilíndrica. La senyoria de l’Ametlla passà el 1239 dels Tarroja a la comanda de Cervera, de l’ordre de Sant Joan de Jerusalem.