EllaAnnie Potts nació con el nombre '''Anne Hampton Potts''' en [[Nashville]], [[Tennessee]], y creció en [[Franklin (Kentucky)|Franklin]], [[Kentucky]], donde se graduó en el instituto Franklin-Simpson. Es hija de Powell Grisette Potts y Dorothy Harris,Pottsy tiene dos hermanas, Mary Eleanor Potts Hovious, y Elizabeth Grissette ("Dollie") Potts. Cuando Potts tenía 17 años, fue golpeada por un conductor ebrio. Recibió una licenciatura en [[Bellas Artes]] (en teatro)dedel [[Stephens College]] en [[Missouri]].