Tony Perez nasceu José Anthony Perez, de ascendência porto-riquenha e filipina. Ele cresceu em San Diego, Califórnia, bem como na Virgínia, e na West 68 Street, Manhattan, Nova York. Antes de ser demolido, seu bairro foi imortalizado no filme West Side Story (1961). Seu pai serviu orgulhosamente na Marinha dos Estados Unidos durante a Segunda Guerra Mundial. Perez pinta e escreve poesia, algumas das quais já publicadas. Ele é casado com sua maravilhosa esposa, Marie Gagne, desde 30 de agosto de 1961. Eles têm uma filha, Linda Marie Lawrence.