时间的流逝
虽然大脑能够而且的确会在人的一生中不断长出新的脑细胞，但随着时间的流逝，（脑内的）海马状突起部位树枝状枝干的减少、氧气缺失、细胞损坏还是可能导致记忆力减退。这种记忆力的自然衰减可以部分解释为什么我们的记忆力会退化并随时间的流逝而越来越严重。从结构上讲，当记忆潜力不能被练习、使用、良好的营养所支持时，由于越来越没有新鲜事物来丰富大脑，大脑中的联系就会变得越来越少。
在体力逐渐崩溃之前，另一个正常失忆的原因可能是随着时间的流逝，我们所编码和存储的新的经历干扰了我们回忆往事的能力。这样，年纪越大的人受到的干扰越大，也越容易健忘。
心理压力与沮丧
心理骚动对记忆力的伤害要比很多人想象得更大。持续不变的压力、焦虑、悲伤、感情受伤，还有沮丧都是记忆力的杀手。比如，出于对发表一场演讲、参加难度很大的考试、失业或生活的变迁所带来的紧张不安可能暂时减弱我们的记忆力，更为严重的是这些长期阴险的压力。一个年复一年地持续在痛苦的环境中工作的人，正在杀死他的脑细胞。在家庭紊乱环境中居住的孩子经常会经历记忆困难，这些困难导致在做作业或考试中出问题。在任何年龄段，情绪骚动或长期沮丧都会导致严重的记忆问题。因为当生活在一个极端情绪化的状态中时，大多数人往往不怎么注意外部世界，而是更注意内心的痛苦和斗争。但是，为了记住某些事，我们不得不集中注意力。可喜的是，当人们的压力或沮丧心情消失时，记忆的全部功能都能恢复。另外，现在对焦虑和沮丧的治疗方法也能帮助许多人重获他们的记忆力。