판단 AI 실전 가이드
[판단 AI 실전 가이드③] Jev·디시전스 API 같은 입력 비교…정답률은 같고 틀리는 방식이 다르다
공개 데이터 400건을 Jev와 오픈AI 디시전스 API에 똑같이 넣었다. 정답률 차이는 1%포인트였지만 보기 순서에 흔들리는 정도, 놓친 답에 붙인 확률, 요청 모양별 비용은 크게 갈렸다.
태그
기사 3건
공개 데이터 400건을 Jev와 오픈AI 디시전스 API에 똑같이 넣었다. 정답률 차이는 1%포인트였지만 보기 순서에 흔들리는 정도, 놓친 답에 붙인 확률, 요청 모양별 비용은 크게 갈렸다.
오픈AI 디시전스 API를 1부와 같은 입력으로 따라 했다. 이미지 판단과 거부 응답 처리, 같은 키로 상위 모델을 잇는 법을 짚었고, 0.98을 붙인 오답이 문턱을 통과하는…
판단 AI Jev를 설치하고 첫 질문을 보내 확률을 받고, 내 데이터로 문턱을 정하는 데까지 실제 호출 결과로 따라 했다. 등급 묘사·탈출구 보기·보기 순서만 바꿔도 결과가…