Començà tocant el saxòfon, i s’inicià en la bateria a divuit anys. Després de debutar amb Joe Marsala treballà amb moltes formacions, entre les quals cal destacar la de Coleman Hawkins i les orquestres de Stan Kenton i Woody Herman. Establert a Los Angeles, el 1952 esdevingué una de les principals figures de l’estil anomenat West Coast Jazz, liderant els seus propis grups i col·laborant amb una llarga llista de solistes, entre els quals s’inclouen Ray Brown, Sonny Rollins, Bill Evans, etc. Els anys setanta fou membre del grup Los Angeles Four. Manne fou reconegut per l’estil melòdic que desenvolupà per als instruments de percussió.