Enfant, Art Pepper étudie la clarinette puis le saxophone alto. Il commence sa carrière musicale dans les années 1940 en jouant avec Gus Arnheim, Benny Carter et Lee Young.