Longwood'daki evinde vefat etti , Virginia'da . Resmi ölüm nedeni genel halsizlik idi (zayıflık).
Muhtemelen yaşlılığından ve kocası James Madison'ın 1836'da kaybı da dahil olmak üzere uzun yaşamının getirdiği streslerden dolayı, ölümünden önce birkaç yıldır sağlığı bozulmaktaydı.