Von Braun avait un frère plus jeune, également nommé Magnus Freiherr von Braun.
Pendant la République de Weimar, son père était ministre de l'alimentation et de l'agriculture, Magnus Freiherr von Braun, mère de Von Braun, fille d'un membre de la Chambre des Lords prussienne.