OrcaRouter 공개, AI 에이전트 실패 분석 데이터셋 OIAS

OrcaRouter는 OpenAI 호환 LLM 게이트웨이로, 실제 AI 에이전트의 실패 사례를 분석해 다섯 가지 판정 지점을 만든 새로운 공개 데이터셋인 OIAS를 공개했다. 이 데이터셋은 ALLOW, CONFIRM, VERIFY, ESCALATE, BLOCK으로 구성되어 있다.

OIAS는 55건의 실제 AI 에이전트 실패 사례에서 뽑힌 판정 지점을 기반으로 하고 있으며, REFUSE 선택지가 전체의 5%에 불과하다. 이는 대부분의 순간은 계속하되 조건을 붙이는 것이 목표라는 것을 나타낸다.