在20岁以前，年龄增长不会导致记忆力障碍，在20岁以后，年龄增长会导致记忆力障碍，在人类的中青年以后随着年龄的增长，记忆力的障碍是大脑功能老化的一种正常表现，实际上在中青年之后，人体的各个器官都会随着年龄的增长而出现不同程度的功能减退。
当然，在各个人的身上，记忆力下降发生的快慢程度、严重程度而都不太一样，大脑的海马区是人类处理学习和记忆相关的区域，随着年龄的增长，这个区域的神经细胞数量会减少，神经末梢负责信息传导的化学递质数量也会减少，而且一定年纪后大脑会出现供血不足，脑组织会有许多小的梗死和微出血。
因为体积很小，这些小的腔梗和微出血并不会导致明显的症状，只有在一些特定序列的脑磁共振检查上才能发现，但是已经对人的脑功能造成了细微的影响，记忆力的轻度下降都是可能的后果之一。
人们的长期记忆，一般不受年龄增长的影响，而短期记忆和暂时记忆的能力会下降，比如老年人往往对自己年轻时候，多年前的事情记忆犹新，但是对当天刚刚发生的事情却记不清楚，学习新知识的能力也比较差。