Phase 1 평가 — 새 세션 사용 데이터
구조 변경은 완료했지만 기억 경험의 개선 여부는 새 Hermes 세션의 실제 질문·recall·stale memory 관찰 후 판단
기억을 더 많이 저장하는 대신, 항상 알고 있어야 하는 기억부터 정리하면 AI 에이전트의 기억 경험이 달라지는지 검증하는 장기 실험
Phase별 결과를 하나의 Lab 기록에 계속 쌓아가는 실험입니다.
Phase 1에서 USER.md와 MEMORY.md의 역할을 분리하는 구현은 완료했지만, 실제 기억 경험이 개선됐다는 결론은 새 세션 평가 전까지 확정하지 않습니다.
Evidence
Scope
Hermes Memory Experiment Phase 1 구현과 후속 평가 계획
Confidence · limited
구조 변경은 완료했지만 기억 경험의 개선 여부는 새 Hermes 세션의 실제 질문·recall·stale memory 관찰 후 판단
2026.08.23 · Phase 1 평가 — 새 세션 사용 데이터
2026.08.23
구조 변경은 완료했지만 기억 경험의 개선 여부는 새 Hermes 세션의 실제 질문·recall·stale memory 관찰 후 판단
2026.08.23
USER.md는 안정적 사용자 모델, MEMORY.md는 현재 working memory로 재정의. Hindsight bank·container·backend는 변경하지 않음
2026.08.23
Hindsight facts·observations·links와 USER/MEMORY 사용량을 역사적 Before 스냅샷으로 고정
구조 변경은 완료했지만 기억 경험의 개선 여부는 새 Hermes 세션의 실제 질문·recall·stale memory 관찰 후 판단
USER.md는 안정적 사용자 모델, MEMORY.md는 현재 working memory로 재정의. Hindsight bank·container·backend는 변경하지 않음
Hindsight facts·observations·links와 USER/MEMORY 사용량을 역사적 Before 스냅샷으로 고정
30문항으로 user model·current state·episode recall·conflict·stale·noise를 Before/After 비교
Stable·Current·Episodic·Transient·Expired lifecycle로 오래된 상태와 일회성 노이즈 분리
반복성·proof count·최근성·충돌을 평가해 안정적인 User Model과 Current State 후보 생성
previous-turn prefetch와 current-query synchronous·topic-change fallback 비교
recall 양·관련성·stale intrusion·noise·latency·토큰량을 동일 질문 세트로 비교