Emile Davenport Hirsch nasceu em Palms, Califórnia, filho de Margaret Esther (Davenport), professora e artista visual, e David M. Hirsch, empresário e produtor. Ele cresceu em Los Angeles e Santa Fé, no Novo México, e tendo sido apresentado a atuar ainda na escola, ele teve seu primeiro trabalho como ator na TV aos 11 anos de idade em um episódio de Kindred: The Embraced (1996).
Mais trabalhos de TV se seguiram até que ele fez sua estréia em Hollywood em The Dangerous Lives of Altar Boys (2002) e não parece ter estado fora do trabalho desde então.