Ford cresceu em West Boylston, Massachusetts. Ele é filho de John, um bombeiro, e Linda, uma enfermeira. Desde muito jovem começou a fazer curtas-metragens com amigos e a escrever guiões. Ele era atlético quando criança e praticava uma grande variedade de esportes. No final do colégio, ele começou a se concentrar mais na atuação e decidiu fazer mais teatro. Jim frequentou então o renomado conservatório de atuação: The Hartt School, em West Hartford, Connecticut, onde recebeu seu B.F.A. no drama. Ele também estudou Shakespeare extensivamente na Inglaterra. Jim combinou seu treinamento clássico e experiência atlética para acumular uma grande e diversificada quantidade de créditos, que incluem tudo, desde filmes independentes de arte a filmes de ação de 100 milhões de dólares. Jim morou em Los Angeles e Nova York.
