Dengan meningkatnya kerjaya politik Zachary Taylor, isterinya, Peggy Taylor berdoa untuk kekalahannya, kerana amat takut akan kesan peribadi jika Zachary menjadi presiden. Sewaktu beliau menjadi Wanita Pertama, kesukaran ketika mengikuti suami dari kubu ke kubu dan melahirkan beberapa orang anak telah memberi kesan teruk kepadanya.
Tidak sihat sepenuhnya, beliau tetap berada dalam pengasingan di tingkat dua Rumah Putih, meninggalkan tugas pelayan wanita rasmi kepada anak perempuannya Mary Elizabeth "Betty" Bliss.
Dengan kematian mengejut Presiden, kesihatan Margaret merosot dengan cepat.
Margaret "Peggy" Taylor meninggal dunia dua tahun kemudian, pada 14 Ogos 1852, di Pascagoula, Mississippi. Beliau dikebumikan di sebelah suaminya di Louisville, Kentucky .
