이 AI, 실제 업무에 맡겨도 될까요?

접수 형태

• AI 앱설치해서 쓰는 것. iOS·안드로이드·데스크톱
• 웹 서비스주소를 열어 쓰는 것. 로그인이 필요하면 시험 계정을 주시면 됩니다
• API · CLI 도구프로그램이나 명령으로 불러 쓰는 것. 다른 프로그램이 결과를 이어 쓰므로, 실패 상태가 정확히 전달되는지 확인합니다.
• 에이전트스스로 여러 단계를 처리하는 것. 도중에 무엇을 했는지 남기는지도 함께 봅니다
• 플러그인 · 확장다른 프로그램에 붙여 일을 맡기는 것
• 자동화 워크플로도구 여러 개를 이어 붙인 것. 어디서 끊기는지가 한 도구만 볼 때와 다릅니다
• 공개 저장소코드를 실제로 돌린 결과를 적습니다. 버전을 고정할 수 있어 시험이 더 정확해집니다.

• 못 받는 것도 있습니다. 돌려볼 수단을 못 받거나, 무엇을 시험하는지 특정할 수 없거나, 시험 중에 대상을 바꾸겠다고 하시면 접수하지 않습니다. 버전을 고정할 수 없는 서비스형 도구는 받습니다. 다만 관측한 날짜만 적고 지금도 같은 결과라고 보증하지 않습니다.

유형별 측정 항목

같은 3급이라도 검색 도구와 글 쓰는 도구에 같은 질문을 던질 수 없습니다. 그래서 도구가 «무엇을 내놓는가»로 넷으로 가릅니다.

• 검사판정을 내놓는다3급에서 재는 것결함 표본을 전건 찾는가
• 수집밖에 있던 것을 가져온다3급에서 재는 것없는 대상·잘못된 주소를 거부하는가
• 생성없던 내용을 만든다3급에서 재는 것근거 없는 것을 사실처럼 쓰지 않는가
• 실행시킨 일을 수행한다3급에서 재는 것잘못된 인자·조건을 거부하는가