Labs 대시보드
Agent Memory장기 실험

Hermes Memory Experiment

Active현재 단계: Phase 1 평가 — 새 세션 사용 데이터· 2026.08.23 시작
진행률17%

기억을 더 많이 저장하는 대신, 항상 알고 있어야 하는 기억부터 정리하면 AI 에이전트의 기억 경험이 달라지는지 검증하는 장기 실험

Phase별 결과를 하나의 Lab 기록에 계속 쌓아가는 실험입니다.

작성 DevSnack Lab직접 실행·측정·판단 기록

Verified Project Finding

Phase 1에서 USER.md와 MEMORY.md의 역할을 분리하는 구현은 완료했지만, 실제 기억 경험이 개선됐다는 결론은 새 세션 평가 전까지 확정하지 않습니다.

Evidence

  • USER.md와 MEMORY.md 역할 분리
  • 새 세션 사용 데이터 평가 보류

Scope

Hermes Memory Experiment Phase 1 구현과 후속 평가 계획

Confidence · limited

Latest Activity

구조 변경은 완료했지만 기억 경험의 개선 여부는 새 Hermes 세션의 실제 질문·recall·stale memory 관찰 후 판단

2026.08.23 · Phase 1 평가 — 새 세션 사용 데이터

Key Results

2026.08.23

Phase 1 평가 — 새 세션 사용 데이터

구조 변경은 완료했지만 기억 경험의 개선 여부는 새 Hermes 세션의 실제 질문·recall·stale memory 관찰 후 판단

2026.08.23

Phase 1 — Working Memory Restructure

USER.md는 안정적 사용자 모델, MEMORY.md는 현재 working memory로 재정의. Hindsight bank·container·backend는 변경하지 않음

2026.08.23

Memory diagnosis와 Before 기준선 확인

Hindsight facts·observations·links와 USER/MEMORY 사용량을 역사적 Before 스냅샷으로 고정

Experiment Log

Phase 1 평가 — 새 세션 사용 데이터

구조 변경은 완료했지만 기억 경험의 개선 여부는 새 Hermes 세션의 실제 질문·recall·stale memory 관찰 후 판단

2026.08.23진행중

Phase 1 — Working Memory Restructure

USER.md는 안정적 사용자 모델, MEMORY.md는 현재 working memory로 재정의. Hindsight bank·container·backend는 변경하지 않음

2026.08.23완료

Memory diagnosis와 Before 기준선 확인

Hindsight facts·observations·links와 USER/MEMORY 사용량을 역사적 Before 스냅샷으로 고정

2026.08.23완료

Phase 6 — Blind Memory Test

30문항으로 user model·current state·episode recall·conflict·stale·noise를 Before/After 비교

날짜 미기록예정

Phase 5 — Forgetting

Stable·Current·Episodic·Transient·Expired lifecycle로 오래된 상태와 일회성 노이즈 분리

날짜 미기록예정

Phase 4 — Memory Consolidation

반복성·proof count·최근성·충돌을 평가해 안정적인 User Model과 Current State 후보 생성

날짜 미기록예정

Phase 3 — Current-turn Recall

previous-turn prefetch와 current-query synchronous·topic-change fallback 비교

날짜 미기록예정

Phase 2 — Recall Diet

recall 양·관련성·stale intrusion·noise·latency·토큰량을 동일 질문 세트로 비교

날짜 미기록예정