И тем не менее американцы считают Джэксона великим президентом. Первый глава исполнительной власти, избранный широким голосованием, он настроил против себя конгрессменов и сенаторов, которые служили избранным, тогда как он действовал на благо всех. То, что волновало Джэксона, не было непременно сутью вопроса, а скорее отражало то, как понимает народ данный вопрос. Таким образом, его мудрость совпадала с ощущением масс, его свершения воспринимались как достижения широкой публики. Клинтон Росситер писал: «Столетию трудно вместить более одного такого президента. Он был гигантом с точки зрения влияния на нашу систему… и вторым после Вашингтона по силе воздействия на роль президента».

Джэксону было семьдесят лет, когда он удалился в Эрмитаж — в свой дом в штате Теннесси. К несчастью, расточительность его приемного сына Эндрю-младшего сделала его жизнь в отставке менее спокойной, чем хотелось бы генералу, и ему пришлось тратить много времени, занимаясь проверкой бухгалтерских отчетов в попытке наскрести деньги. Он сохранил интерес к своей партии и влияние на нее, достаточное, чтобы продиктовать выдвижение своего протеже — темной лошадки — Полка на президентских выборах в 1844 году.

Его письмо Полку от 6 июня 1845 года свидетельствует, что его рассудок оставался светлым, но, по наблюдению историка Дж. У. Варда, его плоть от талии вниз настолько ослабела, что он не мог двигаться. 8 июня Джэксон потерял сознание, и ему влили в рот ложку бренди в надежде восстановить его силы. Во второй половине дня Эндрю-младший спросил генерала, узнает ли он его. Джэксон ответил положительно и попросил дать ему очки. Вскоре после этого он угас.

Но джэксоновская эра не оборвалась на этом. В годы между пребыванием на посту президента Старого Гикори и избранием Линкольна оппозиция сумела несколько ослабить авторитет президентской власти, но не смогла воссоздать прежнее положение. С джэксоновской эрой покончил Линкольн. Но даже он был вынужден прибегнуть к идеям Джэксона о роли президента для укрепления собственного авторитета и сохранения целостности Соединенных Штатов.