O nome Ginger surgiu quando, ainda menina, a sua prima mais nova não conseguia dizer Virginia e então dizia "Ginja". Sua mãe foi a grande incentivadora de sua carreira, que começou aos 15 anos em vaudevilles.
Em 1941 recebeu um Óscar de Melhor Actriz pelo seu papel em Kitty Foyle, num papel dramático. Trabalhou em Hollywood até 1971 e casou-se cinco vezes. Fez quase 100 filmes entre musicais, comédias e dramas.