人的記憶是由腦掌管的。腦包括大腦、小腦、間腦和腦幹，它們各有不同的功能。大腦是掌管人體感覺和運動的“司令部”，也是思想活動的“指揮中心”。

大腦位於腦的最上層，外形很像核桃肉，分左右兩個半球，約佔整個腦的3/4大小。它的外層呈灰白色，叫灰質，即通常所說的大腦皮層，約由140億個神經細胞組成。內層呈白色，叫白質，大量的神經纖維集中在這裡。

外界的各種聲音、光、氣味以及其他刺激，透過人的眼睛、耳朵、鼻子、面板等感覺器官被人體感知，然後由神經傳送到大腦，引起大腦有關部位的興奮。每次興奮在大腦皮層都會留下痕跡。經過大腦加工處理，這些興奮可透過某種方式表現出來，這就是大腦的記憶能力。興奮的次數血多，越強烈，留下的痕跡就越深，腦子也就記得越牢。