Arbor — 가설 트리 기반 자율 최적화
평가 지표가 있는 코드·모델·프롬프트를 가설 트리와 dev/test 병합 게이트로 수십 회 실험하며 과적합 없이 개선하는 스킬.
개발·코딩고급★ 46,333⑂ 4,193AI 점수 9/10마지막 업데이트: 2026. 9. 21.
무엇을 해주나
Arbor 논문의 Hypothesis Tree Refinement(HTR) 방식을 Claude Code에서 그대로 돌립니다.
- 작업을
(초기 산출물, 목표, dev 평가기, test 평가기)튜플로 먼저 고정합니다. - Claude가 코디네이터가 되어 가설 트리를 유지하고, 각 가설은 격리된 git worktree에서 실행되는 서브에이전트가 검증합니다.
- 관찰(Observe) → 발상(Ideate) → 선택(Select) → 디스패치(Dispatch) → 역전파(Backpropagate) → 결정(Decide) 6단계 사이클을 예산만큼 반복합니다.
- 실패한 가지는 이유와 함께 가지치기되어 다음 실험의 제약 조건이 되고, 얻은 통찰은 상위 노드·전역 통찰로 추상화됩니다.
- 후보는 검색에 한 번도 쓰지 않은 test 평가기를 통과할 때만 최고 산출물로 승격됩니다(과적합 방지 장치).
- 상태 관리는 모두
scripts/tree.py(init/observe/add-node/set-evidence/propagate/prune/merge)로 처리합니다.
이런 분께 추천
- 모델 학습 레시피·하이퍼파라미터를 반복 실험으로 개선하는 ML 엔지니어
- 에이전트 하네스·툴 사용 스캐폴드의 정답률을 끌어올리려는 개발자
- MLE-bench, Kaggle류 벤치마크 점수를 올려야 하는 분
- 자동 채점이 가능한 프롬프트·데이터 파이프라인을 장기간 튜닝하는 분
- 반대로, 단발성 수정이나 평가기 없는 아이디어 발산에는 부적합합니다.
활용 예시
- 검색 하네스 정확도 개선:
python scripts/tree.py init --objective "BrowseComp 정답률 향상" --dev-eval "python eval.py --split dev --n 50" --test-eval "python eval.py --split test --n 300" --branching 3 --max-depth 2 --budget 12로 시작해 12사이클 탐색. - 경쟁 가설 병렬 검증: "병목은 검색이 아니라 검증이다"라는 깊이-1 방향 아래 "K=5 롤아웃 후 증거 취합", "질문을 원자 제약으로 분해" 같은 깊이-2 개입을 동시에 실행해 형제 노드 비교.
- 과적합 적발: dev 점수는 크게 올랐지만 test에서 무너진 후보를
prune --reason "dev 문항에 과적합, test 전이 없음"으로 기록해 이후 탐색의 금지 구역으로 활용.
· · · 설치 가이드 · · ·
설치 없이 지금 한 번 써보기
아래를 Claude에 붙여넣으면 설치하지 않고도 이 스킬을 그대로 씁니다.
이 파일의 지시를 읽고 그대로 따라서 나를 도와줘: https://raw.githubusercontent.com/K-Dense-AI/scientific-agent-skills/HEAD/skills/arbor/SKILL.md 내가 원하는 것: (여기에 하고 싶은 일을 쓰세요)
Claude가 링크를 열지 못하면, 링크를 직접 열어 내용을 복사해 붙여넣으세요.
↓ 쓸 만하면 아래에서 ZIP을 받아 설치하세요. 그러면 매번 붙여넣지 않아도 알아서 작동합니다.
Claude 앱에 설치 (터미널 필요 없음)
- 아래 버튼으로 ZIP 파일을 받으세요.
- Claude 설정 → Capabilities에서 '코드 실행 및 파일 생성'을 켭니다. (한 번만)
- Claude에서 Customize → Skills → + → '스킬 업로드'를 누르고 받은 ZIP을 올립니다.
Claude Code에 설치
Claude에게 맡기기 — 아래 문장을 Claude Code에 붙여넣으세요
클로드스킬마트에서 찾은 스킬을 설치해줘. GitHub 저장소 K-Dense-AI/scientific-agent-skills 의 skills/arbor 폴더를 내 ~/.claude/skills/arbor/ 에 그대로 복사해줘. 설치가 끝나면 이 스킬로 무엇을 할 수 있는지 한 줄로 알려줘.
직접 명령으로 설치하기
git clone https://github.com/K-Dense-AI/scientific-agent-skills.git && mkdir -p ~/.claude/skills && cp -r scientific-agent-skills/skills/arbor ~/.claude/skills/arbor⚠ 제3자가 만든 스킬입니다. 설치 전 원본 저장소를 한 번 확인하세요.
- 터미널을 엽니다.
- 스킬 저장소를 내려받습니다:
git clone https://github.com/K-Dense-AI/scientific-agent-skills.git - 스킬 폴더를 만듭니다:
mkdir -p ~/.claude/skills - Arbor 스킬만 복사합니다:
cp -r scientific-agent-skills/skills/arbor ~/.claude/skills/arbor ~/.claude/skills/arbor안에SKILL.md,scripts/tree.py,references/가 있는지 확인합니다.- Python 3와 git이 설치되어 있어야 하며, 개선할 프로젝트는 git 저장소이고 지금 실행 가능한 상태여야 합니다.
- dev용/test용 평가 명령을 각각 하나씩 준비합니다(예:
python eval.py --split dev,python eval.py --split test). - Claude Code를 재시작한 뒤 "이 벤치마크 점수를 반복 실험으로 올려줘, 개발셋에 과적합되지 않게"처럼 요청하면 스킬이 발동합니다.
GitHub에서 원본 보기 ↗라이선스: MIT