Aquest castell sorgí en el terme de Santa Eulàlia de Riuprimer que és el que primerament s’utilitzà per a anomenar aquesta zona. Tots dos topònims es documenten a partir del 904, un com a vall de Santa Eulàlia, i l’altre com a lloc que anomenen la Torroella. Mentre que el primer s’imposà per a anomenar tot el terme, el segon fou emprat només pels voltants del lloc on es trobava. És a partir del 1099 quan apareix el castell de Torroella plenament organitzat, ja que en aquest any el bisbe de Vic, Berenguer Sunifred de Lluçà, en el seu testament, llegà el castell de Torroella a la canònica de Sant Pere de Vic. Les notícies posteriors indiquen que el tenien infeudat a diverses famílies, així el 1130 Bernat de Talamanca cedí a Pere Udalard de Sentfores el castell de Torroella. Però per sobre dels Talamanca hi havia el bisbe de Vic com a senyor eminent tal com apareix en algun jurament de fidelitat, com el que el 1203 feu Guillem Bernat de Manlleu al bisbe de Vic. Si els Talamanca aviat desaparegueren en el domini del castell de Torroella, els Manlleu no hi perduraren gaire, així com els Malla. Després els bisbes de Vic concediren el castell a famílies poc rellevants. El 1367 ja no era clar si Torroella era un castell o un mas i si havia de fer serveis militars com a castell o no. Actualment és un gran mas fortificat dels segles XV-XVI, si bé té al costat un petit puig on es troben restes de murs o fonaments de construccions medievals.