Ermita desapareguda que possiblement cal situar vora l’Ombriu de Sant Simó. Segons la llegenda, aquesta capella commemorava la capitulació de Fraga el dia de la festivitat de sant Simó i sant Judes, ço és, el 28 d’octubre de 1149 (quatre dies després que Lleida). Sembla que centrà un antic domini dels comtes de Pallars que passà després als templers (1174, 1190). Segons J. Salarrullana, la casa ermita de sant Simó passà finalment en poder dels frares hospitalers (1317), per extinció d’aquell orde, i constituí una quadra dins el terme de Fraga.