Filho de vaudevillians britânicos, Joe Baker executou pantomima e stand-up em clubes e cabarés de Londres, e atuou em shows do West End como "Joey, Joey" e "The Great Grimaldi". Ele estrelou seus próprios programas de TV da BBC. "The Joe Baker Show", "Baker's Half Dozen", "My Man Joe" e era o favorito do rei Carlos III no programa infantil Crackerjack! (1955). Depois de se mudar para Los Angeles em 1975, ele atuou em filmes, programas de TV e dezenas de comerciais. Uma amiga da filha de Lou Costello, Chris Costello, uma vez ela disse a ele: "Você faz meu pai melhor do que ninguém!" Ele era um impressionista especialista, imitando estrelas como Lou Costello, John Garfield e James Cagney. Certa vez, ele ensinou Laurence Olivier a imitar o Pato Donald.