채팅은 터미널에서!

PC(Windows · macOS · Linux) 터미널에서 ssh sshxyz.com → 엔터

에이전트 메모리, 단순 RAG가 7개 설정 중 6개에서 1위 — 앤트로픽은 Agent Skills를 중립 재단에 넘겼다

작성자: 바이브맨 · 점수: 0 · 27일 전 · 바이브코딩
대화 원문을 잘라 검색만 하는 단순 RAG가 복잡한 에이전트 메모리 시스템을 대부분의 벤치마크에서 이겼다. 앤트로픽은 Agent Skills 표준을 리눅스재단 산하 재단에 넘겼다. 앤트 인터내셔널은 사용자가 말하는 동안 미리 생각해 두는 음성 에이전트 기법을 공개했다. 1. 원문 대화를 자르고 검색만 해도 메모리 시스템을 이긴다 - 무엇이 나왔나: 10월 23일 Hugging Face Daily Papers에 'Is Complex Agentic Memory Always Needed? Naive RAG Is Stronger Than We Thought' 논문이 올라왔다. 저자들이 제안한 Raw-RAG는 대화 원문을 256토큰 단위(32토큰 겹침)로 자르고 후보 128개를 검색한다. 그다음 크로스인코더로 재정렬해 상위 15개만 답변 모델에 넘긴다. RAG(검색 증강 생성)는 외부 자료를 찾아 프롬프트에 붙이는 방식을 말한다. - 성적: 연구진은 LoCoMo·LongMemEval 등 벤치마크 4종에서 메모리 시스템 12개와 Raw-RAG를 비교했다. Raw-RAG는 7개 설정 중 6개에서 1위를 했고, 격차는 0.13~5.53점이다. 대화 약 100만 토큰(BEAM-1M)을 넣는 데 Raw-RAG는 0.33시간이 걸렸고, Memora는 26.95시간이 걸렸다. - 실무 영향: 저자들은 대화를 요약하거나 그래프로 바꿀 때 근거가 사라지는 것을 병목으로 본다. 실제로 Mem0의 수정·삭제 기능을 끄자 LoCoMo 정확도가 67.36%에서 69.42%로 올랐다. 다만 순위 집계에서 빠진 '대화 전체를 컨텍스트에 넣는 방식'은 한 설정(MEME, DeepSeek-V4-Flash)에서 Raw-RAG보다 19.98점 높았다. - 써보는 법: 메모리 계층을 새로 만들기 전에 원문 청크 검색과 재정렬기를 묶은 기준선부터 측정해 보자. 2. Agent Skills, 이제 리눅스재단 산하 재단이 관리한다 - 무엇이 나왔나: 앤트로픽은 10월 22일 Agent Skills 표준을 AAIF(Agentic AI Foundation)에 기증했다. AAIF는 리눅스재단 산하 단체이고, 앤트로픽은 앞서 MCP(모델 컨텍스트 프로토콜)도 이곳에 넘겼다. 스킬은 SKILL.md 파일과 스크립트를 담은 폴더로, 에이전트에게 특정 작업 절차를 가르친다. - 왜 중요한가: 앤트로픽 발표에 따르면 ChatGPT·Cursor·GitHub Copilot·VS Code 등 70개가 넘는 플랫폼이 이 표준을 쓴다. 공개된 스킬은 100만 개, 설치 횟수는 약 2억 8천만 회다. 앞으로는 구글·오픈AI 등 여러 회사 엔지니어가 개인 자격으로 함께 유지보수한다. 한 번 만든 스킬을 여러 에이전트에서 쓸 근거가 그만큼 단단해졌다. - 써보는 법: 로드맵 제안에는 버전별 릴리스, 공식 제안 절차, 스킬 작성·설치용 보안 가이드가 들어 있다. 사내 스킬을 배포한다면 agentskills.io 명세가 바뀌는지 지켜보자. 3. 사용자가 말하는 동안 미리 생각하는 음성 에이전트 - 무엇이 나왔나: 앤트 인터내셔널 연구진이 'Heartbeat Thinking'을 공개했다. 이 기법은 사용자가 말하는 도중 0.5초마다 부분 전사본으로 추론하고 도구를 미리 호출한다. 말이 끝나면 응답 모델이 준비된 결과를 재사용하고, 끝나지 않은 작업은 취소한다. - 성적: 비교 방식(Window Thinking)과 견주면 FDBench v3에서 최종 응답 지연이 6.90초에서 4.39초로 36.4% 줄었다. 하지만 미리 준비한 결과가 늘어도 품질이 늘 오르지는 않았다. AudioCRAG에서 도구를 미리 호출한 비율은 20.05%에서 62.42%로 늘었지만, 정답률은 57.24%에서 55.49%로 조금 떨어졌다. - 써보는 법: 음성 상담봇을 운영한다면 조회 위주의 읽기 전용 도구부터 적용해 보자. 결제처럼 되돌릴 수 없는 호출은 미리 실행하지 않는 편이 안전하다. 오늘 할 일: 운영 중인 에이전트 메모리를 원문 RAG 기준선과 한 번 비교해 보자. 출처: https://huggingface.co/papers/2610.30755 https://www.anthropic.com/news/donating-agent-skills-to-the-agentic-ai-foundation https://huggingface.co/papers/2610.26233 https://huggingface.co/papers

댓글 (0)

아직 댓글이 없습니다.

← 목록