從這一刻到下一刻，是什麼控制著思維的工作呢？做一項複雜的工作時，我們怎麼能給原來的地方做好標記，這樣如果外界或者思維內部出現什麼干擾，我們還可以「回到」原來的地方，而不必從頭再來？我們怎麼記住自己試過了什麼，學會了什麼，而不會一次又一次反覆循環呢？
目前還沒有人知道記憶是如何在我們頭腦內部控制自己的，也許每個主要的智能組都有某種不同的程序，每種程序都適用於一些特定類型的工作。下面的圖畫提出了一些記憶的機器，我們認為它們會出現在典型的大型智能組中。
我們會假定每個實質性的智能組都有若干個「微型記憶單元」，每個單元都是一種臨時的K線，它可以迅速儲存和恢復這個智能組中許多智能體的狀態。每個智能組同樣還有一些「短時記憶單元」，它們能反過來儲存或恢復微型記憶本身的狀態。如果這些臨時的記憶單元被重新使用，儲存在它們之中的信息就會被消除，除非能通過某種方式「轉移」到更「永久」或更「長時」的記憶系統中。有良好的證據表明，在人腦中，把信息轉移到長時記憶的過程非常慢，需要的時間從幾分鐘到幾小時不等。因此，許多臨時記憶都會永久喪失。
一個成長中的兒童需要許多方法來控制所有這些機制。與此相應，我們的圖畫中也包含了其他智能組中的信息流。因為這種記憶控制智能組同樣也需要學習和記憶，我們的圖畫中也包含了為它提供的記憶系統。