El castell de Vilademany era situat al lloc actualment ocupat pel mas Forroll, llindant amb l’indret de Vilobí d’Onyar i adossat a la capella de Sant Jaume de Vilademany. Aquesta capella i la capella també romànica de la Mare de Déu de Vilademany són les úniques que conserven el locatiu Vilademany. No és fins al segle XII que trobem referències documentals del llinatge Vilademany. L’any 1121, segons un document del Liber feudorum maior, Pere Ramon de Vilademany feia de testimoni en un jurament de fidelitat retut per Berenguer, fill de Teresa, al comte Ramon Berenguer III per diversos castells. Degué ésser un noble força important, car l’any 1128 se li confià l’espasa del comte Ponç Hug d’Empúries, després de la seva derrota. Amb tot, no trobem la primera referència del castell fins l’any 1269: “termini castri de Villademagno”, ran de la donació d’uns masos per part d’Arnau de Vilademany i la seva muller al rei Jaume I de Catalunya-Aragó. Segons Antoni Pladevall, el 1305 hi ha indicis de la residència de Bernat de Vilademany al seu castell, el qual fou l’indret originari d’aquest llinatge, que tingué moltes altres possessions, per exemple a Santa Coloma de Farners.