Kevin Hagen é o filho de dançarinos de salão profissional, Haakon Olaf Hagen e Marvel Lucile Wadsworth. Seu pai deixou a família quando Kevin tinha cinco anos. Ele foi criado por sua mãe, duas tias e uma avó, com alguma ajuda de seu tio, um médico. A família mudou-se para Portland, Oregon, quando Kevin era um adolescente e ele jogou beisebol e futebol na Jefferson High School. Ele participou de Oregon State University antes de se alistar na Marinha EUA após a Segunda Guerra Mundial, e servido em San Diego.
Aos 15 anos, ele pesava 250 libras, mas perdeu 60 libras por no verão seguinte.
Seu filho, Kristopher Hagen (34 anos em 2005), é um professor Ed Especial e treinador de beisebol colegial em Bakersfield, Califórnia.
Ele era um pai solteiro por cerca de 20 anos. Ele foi casado quatro vezes.