에이전트 경로 평가는 결과가 같아도 중간에 어떤 도구를 썼는지 살핍니다. 기대 경로와 실제 경로를 비교하면 불필요한 호출이나 빠진 검증을 발견할 수 있습니다.
데모는 같은 답에 도달한 두 경로를 나란히 진행하며 잘못된 도구 선택을 표시합니다. 한 가지 정답 경로만 강제하면 유효한 대안을 오판할 수 있으므로 평가 기준을 과제에 맞춥니다.
언제 쓰나
도구 사용의 안전성·효율·순서가 최종 답만큼 중요한 에이전트를 평가할 때 사용합니다.
에이전트 경로 평가
Agent trajectory evaluation
최종 답뿐 아니라 답에 이른 도구 호출 순서와 선택을 검사합니다.
···
<div class="stage"><div class="title">TRAJECTORY EVALUATION</div><div class="canvas"><div class="paths"><div><b>EXPECTED</b><span id="e0">search</span><span id="e1">verify</span><span id="e2">answer</span></div><div><b>ACTUAL</b><span id="a0">search</span><span id="a1">skip</span><span id="a2">answer</span></div></div><div class="finding" id="finding">compare tool steps</div></div></div>.stage{width:min(94vw,820px);height:min(88vh,330px);box-sizing:border-box;padding:clamp(9px,2.4vmin,18px);border:1px solid var(--line);border-radius:13px;background:var(--surface);display:flex;flex-direction:column;gap:clamp(7px,2vmin,14px);font:600 clamp(12px,2.5vmin,16px)/1.28 "Pretendard Variable",Pretendard,-apple-system,BlinkMacSystemFont,"Apple SD Gothic Neo",sans-serif;color:var(--fg);overflow:hidden}.title{color:var(--accent);letter-spacing:.035em;flex:none}.canvas{position:relative;flex:1;min-height:0;display:flex;align-items:center;justify-content:center}.muted{color:var(--muted)}.mono{font-family:ui-monospace,SFMono-Regular,monospace}.box{border:1px solid var(--line);border-radius:8px;background:var(--bg);padding:clamp(5px,1.4vmin,12px);text-align:center}.active{border-color:var(--accent)!important;color:var(--accent)!important;background:color-mix(in srgb,var(--accent) 12%,var(--surface))!important}.canvas{flex-direction:column;gap:clamp(7px,2vmin,15px)}.paths{width:100%;max-width:620px;display:flex;flex-direction:column;gap:7px}.paths>div{display:flex;align-items:center;gap:4px}.paths b{width:clamp(72px,20vmin,115px);color:var(--muted)}.paths span{flex:1;border:1px solid var(--line);border-radius:4px;text-align:center;padding:clamp(4px,1.5vmin,8px) 1px}.paths .on{border-color:var(--accent);color:var(--accent)}.paths #a1.on{border-color:var(--accent-3);color:var(--accent-3)}.finding{color:var(--accent)}let n=0;function compare(){const s=n++%3;for(let i=0;i<3;i++){document.getElementById('e'+i).classList.toggle('on',i<=s);document.getElementById('a'+i).classList.toggle('on',i<=s)}document.getElementById('finding').textContent=s<1?'compare tool steps':'verification step missing'}compare();setInterval(compare,900)