Nascido em Cambridge, Massachusetts, Phil Brown era filho de um médico cujo trabalho levou a família por todo o país. Depois de se formar em dramaturgia na Universidade de Stanford, Brown desempenhou alguns de seus primeiros papéis no palco como parte do Group Theatre de Nova York. Quando fechou, ele e outros veteranos do Group Theatre foram para Hollywood, onde Brown trabalhou no cinema e ajudou a fundar o lendário Laboratório de Atores. Sua associação com o Lab voltou para assombrá-lo mais tarde na década, quando seus membros caíram sob o escrutínio do Comitê de Atividades Não-Americanas da Câmara, e Brown acabou sendo compelido a se mudar com sua família para a Inglaterra, Reino Unido. No exterior, ele foi capaz de retomar a atuação no palco, TV e filmes; ele também dirigiu para o palco e TV. Ele voltou aos Estados Unidos na década de 1990 e fez rodadas de shows de autógrafos.
