Les notícies històriques sobre aquest castell són escadusseres. L’any 1120 Tedball de Vallferrera féu testament i deixà al seu fill Tedball en alou la meitat del castell i la vila d’Herba-savina (“ipso castro et villa de Erbasavina”). A diferència d’altres dominis que és relacionen en el testament, tinguts en feu pel comte de Pallars, Herba-savina era un domini alodial que Tedball devia compartir amb algun altre senyor.
Posteriorment Herba-savina formà part del vescomtat de Vilamur. L’any 1831 n’era titular el marquès de Pallars i vescomte de Vilamur.