Al desembre del 1539 fou nomenat mestre de capella de la catedral de Toledo, però poc temps després el capítol l’obligà a dimitir a causa de les seves continuades absències. La intervenció del seu protector, l’arquebisbe Juan Pardo de Tavera, el retornà al seu lloc fins que el prelat morí (1545). El successor de Torrentes a la seu toledana fou Cristóbal de Morales. Al cap de dos anys tornà a ser-hi admès i es mantingué en el lloc fins el 1553, moment en què fou obligat a abandonar-lo novament. Readmès el 1571 per tercera vegada, romangué en el càrrec fins a la seva mort. En diversos manuscrits de la catedral de Toledo s’han conservat algunes de les seves obres, bàsi cament de caràcter litúrgic: misses, magníficats, salms, himnes i lamentacions.