Estigué vinculat a l’Escuela del Chaco, fundada entorn del 1783 pel colombià Pedro Palacios y Sojo. Aquesta institució fou pionera pel que fa a la pedagogia musical a Veneçuela i reuní un bon nombre de professors i alumnes, entre aquests darrers José Francisco Velásquez, que esdevingué cunyat d’Olivares. Treballà bàsicament per a la catedral de Caracas i per a diversos ordes religiosos. Durant la dècada del 1790 fou l’encarregat, en diverses ocasions, de compondre la música coral per a festivitats destacades. La seva obra inclou música religiosa diversa, com dues misses, una missa de difunts, villancicos i motets. El seu germà Juan Bautista Olivares també fou un important organista i compositor.