Elle Fanning's ouders: Joy Arrington (tennis) en Heath Fanning (honkbal/vastgoed)
Elle Fanning's ouders zijn:
- Joy Arrington — Voormalig professionele tennisser.
- Heath Fanning — Voormalig minor league honkballer, nu werkzaam als vastgoedontwikkelaar.
Beiden steunden Elle en haar zus Dakota's actercarrière's vanaf jonge leeftijd. De familie komt uit Conyers, Georgia.