구글이 공개한 에이전트 하네스 자동 개선
Harness² · 프롬프트·규칙·스킬을 고치는 오픈소스
구글 리서치가 논문과 함께 공개한 Harness²는 AI 에이전트를 둘러싼 하네스(프롬프트·규칙·메모리·스킬·스크립트)를 작업마다 고쳐 쓰게 하는 오픈소스입니다. 모델 가중치는 그대로 둡니다.
같은 작업에 후보 하네스를 돌려 보고 정답 채점 없이 실행 결과끼리 비교해 효과가 보인 수정만 합칩니다.
논문에서는 한 단계만 고쳐도 GLM-5와 Gemini 3.5 Flash의 점수가 WorkBuddy-Bench에서 최대 11.5점, JobBench에서 최대 4.5점 올랐습니다.
작업이 끝나면 고친 하네스와 근거 있는 교훈을 저장해 다음 작업에 씁니다.
OpenCode와 Codex 실행기를 지원하고 Apache-2.0이며, 구글 공식 지원 제품은 아니라고 밝혔습니다.
출처 구글 리서치 논문 · github.com/google-research/harness2
카드 내용
- 논문 결과 · WorkBuddy-Bench코드·웹·오피스 점수가 7~9점씩 올랐습니다
Gemini 3.5 Flash로 잰 값이고 모델은 그대로입니다. 하네스를 고치는 단계를 5번까지 돌린 결과입니다.
출처: 구글 리서치 Harness² 공식 소개 영상 - 고치는 순서고칠 안을 내고 돌려 본 뒤 근거 있는 것만 합칩니다
같은 작업에 후보 하네스를 돌려 행동을 비교합니다. 정답 채점 없이 실행 결과끼리 견줘서 효과가 보인 수정만 합쳐 다시 돌립니다.
출처: 구글 리서치 Harness² 공식 소개 영상 - 하네스 구성모델 바깥의 8곳을 파일로 나눴습니다
시스템 프롬프트·규칙·메모리·도구 안내와 서브에이전트·스킬·스크립트·플러그인입니다. 작업하는 동안 이 파일들을 고칠 수 있습니다.
출처: 구글 리서치 Harness² 공식 소개 영상 - 공식 사례 · JobBench 과제 하나하네스 파일을 고치자 43.1점이 77.8점이 됐습니다
파일끼리 숫자를 대조하지 않고 결과물을 다시 열어 보지 않던 문제를 찾아 규칙·스킬·도구 안내·검사 스크립트를 새로 썼습니다.
출처: Harness² 공식 사이트 - 구조일은 에이전트가 하고 하네스는 Harness²가 고칩니다
작업이 끝나면 고친 하네스와 근거 있는 교훈을 남겨 다음 작업을 고칠 때 씁니다.
출처: github.com/google-research/harness2
