[💭] 인간 기억은 어떻게 압축되고 다시 살아나는가

✨ GPT-5.5의 요약 　

과거의 추억이 갑자기 떠오른 경험을 출발점으로, AI 컨텍스트 압축과 인간 기억의 인덱싱, 자연의 신비를 함께 생각한 글.

애인과 데이트하려고 하늘공원에 방문했다.

그런데 갑자기 과거의 추억들이 떠올랐다.

“아! 맞다! 여기 와봤었네! 여기가 거기였구나!”

이상했다.

어느 순간 잊고 있었던 기억이었다. 그런데 하늘공원에 도착하자마자 갑자기 예전 장면이 확 올라왔다.

가만히 생각해보면, 사람(동물)의 기억력은 참 대단하다.

AI를 쓰다 보면, 컨텍스트가 한정되어 있어 자꾸만 압축을 하고 압축을 해줘야 한다. 그리고 그 과정에서는 필연적인 데이터 손실이 계속 일어난다. 결국 어느 순간에는 기억을 최대한 압축하고, 파편화해서, 문서화하거나 DB로 저장해두어야 한다.

그런데 사람 또한 컨텍스트가 한정되어 있다.

사람도 모든 것을 원본 그대로 들고 다니지는 못한다. 자꾸만 압축하고, 잊고, 뭉개고, 의미만 남긴다.

그런데 사람은 인덱싱이 말도 안 되게 뛰어나다.

수년, 수십 년 전의 기억도 어떤 단서 하나에 곧바로 상기되고는 한다. 심지어 압축됐던 기억들의 원본이 어느 정도 살아 있어서, 가끔씩은 과거의 기억이 생생하게 그려지기까지 한다.

물론 인간도 할루시네이션 증상이 있다.

기억은 완전한 원본 복구가 아니다. 연구 쪽 언어로 말하면, 일화 기억은 과거 경험의 복사본을 꺼내는 것이라기보다 다시 구성하고 재구성하는 과정에 가깝다.¹ 그래서 어떤 기억은 너무 생생한데도 틀릴 수 있다.

그럼에도 신기한 건, 그 재구성이 아무렇게나 일어나지 않는다는 점이다.

해마 인덱싱 이론은 해마가 경험 전체를 통째로 저장한다기보다, 경험 당시 함께 활성화됐던 신피질 영역들을 다시 불러오는 인덱스 역할을 한다고 본다.² 그리고 해마는 분산된 기억 흔적을 다시 묶어내는 장치로 설명되기도 한다.³

이 관점에서 보면, 내가 겪은 일은 꽤 직관적이다.

그 장소가 예전의 시야, 감정, 대화, 날씨, 몸의 감각 같은 온갖 종류의 트리거들을 한 번에 자극했다. AI로 치면, 저장된 전문을 그대로 읽은 게 아니라 키워드 하나가 벡터 검색처럼 걸렸고, 그 뒤에 여러 데이터가 다시 모인 느낌에 가깝다.

그런데 이 부분이 참으로 신기하다.

AI는 컨텍스트 밖으로 밀려난 것을 다시 불러오려면 외부 문서, DB, 검색, 요약, 태그가 필요하다. 그런데 사람은 몸 자체가 이미 엄청난 검색 시스템처럼 작동한다. 온갖 트리거들이 전부 실시간 검색 쿼리가 되어 즉각적으로 인덱스된 기억들이 튀어나온다.

정보이론 관점에서 일화 기억의 망각을 “의미 압축”으로 설명하려는 연구도 있다. 이 관점은 기억이 모든 픽셀을 보존하는 대신, 이후 판단에 덜 중요한 세부를 버리고 의미 구조를 남기는 쪽으로 압축된다고 본다.⁴

난 이 관점이 묘하게 와닿았다.

분명, 나는 예전의 모든 장면을 원본 그대로 갖고 있지 않았다. 그때 어떤 옷을 입었는지, 정확히 몇 시였는지, 어떤 순서로 걸었는지는 흐릿했다. 그런데 “아, 여기였구나”라는 감각은 살아 있었다. 그 장소가 내 인생의 어느 시절과 연결되어 있었다는 의미는 남아 있었다.

AI의 압축 방식은 내가 일정 부분 명시적으로 컨트롤 해줘야 한다.

무엇이 중요한지, 무엇을 버릴지, 어떤 이름으로 저장할지, 어떤 태그를 붙일지 정해야 한다. 대충 자동으로 압축하면 가끔씩 중요한 맥락이 날아가서 또다시 기억을 주입시켜줘야 한다. (뭐, 요즘은 Codex, Claude Code 등 툴의 하네스 구조가 너무 좋아서, 요즘은 그냥 자동 압축만 하긴 하지만… 어쨌든)

인간의 기억도 이처럼 손실 압축이다. 그런데 이상하게도 의미가 강하게 남는다.

물론, 때로는 의미만 남고 사실이 날아간다. 그래서 기억 왜곡 등의 위험성은 있다. 하지만 그 의미의 연속성 덕분에 내가 ‘나’로서 지속적으로 인식된다.

자연 앞에서 작아진다

지금도 인간은 자연을 통해 끊임없이 배우고 발견한다.

심지어 최신 기술이나 연구까지도 그렇다. AI, 압축, 검색, 인덱싱 같은 말을 열심히 붙여도, 막상 내 몸 안에서는 이미 그런 것보다 훨씬 오래된 방식으로 기억이 움직이고 있었다.

그런데 어느 날 어떤 장소에 서면, 내가 잊었다고 생각한 과거가 다시 열린다.

이를 보면, 자연은 참 신기하다. 인간이 아무리 모방해도 결국 단순한 동물의 뇌조차 100% 구현하지 못하고, 진짜 살아있는 생명체도 모방할뿐 만들어내지도 못한다.

이런 걸 보면 자연의 위대함 앞에서 인간은 한없이 작다는 게 느껴진다. 자연은 참 신비한 것 같다.

참고 자료

1. Eleanor Spens, Neil Burgess, 「A generative model of memory construction and consolidation」, Nature Human Behaviour 8, 526–543 (2024). 일화 기억이 복사본 검색이 아니라 재구성과 통합의 성격을 가진다는 논의에 참고했다. https://www.nature.com/articles/s41562-023-01799-z ↩

2. T. J. Teyler, P. DiScenna, 「The hippocampal memory indexing theory」, Behavioral Neuroscience 100(2), 147–152 (1986). 해마가 경험 당시 활성화된 신피질 영역들의 인덱스를 형성한다는 관점에 참고했다. https://pubmed.ncbi.nlm.nih.gov/3008780/ ↩

3. T. J. Teyler, J. W. Rudy, 「The hippocampal indexing theory and episodic memory: updating the index」, Hippocampus 17(12), 1158–1169 (2007). 해마 인덱싱 이론의 업데이트된 설명에 참고했다. https://onlinelibrary.wiley.com/doi/10.1002/hipo.20350 ↩

4. David G. Nagy, Balázs Török, Gergő Orbán, 「Optimal forgetting: Semantic compression of episodic memories」, PLOS Computational Biology 16(10), e1008367 (2020). 일화 기억의 망각과 왜곡을 의미 압축 관점에서 설명하는 데 참고했다. https://pmc.ncbi.nlm.nih.gov/articles/PMC7591090/ ↩