Sa mère, Mary Haines Yorke, meurt lors d'un voyage à la Nouvelle-Orléans en 1820, laissant Sarah et ses deux sœurs devenir orphelines.
Alors qu'elle se rendait à la Nouvelle-Orléans, sa mère mourut en 1820.