WHAT IT DOES

무엇을 하나요?

jevals는 LLM 심사자 대신 Jev 방식의 의사결정 모델을 이용해 에이전트 평가와 가드레일을 실행합니다. 여러 평가의 상태와 질문을 합쳐 트레이스당 한 번의 요청으로 처리하며, 같은 정의를 오프라인 지표·운영 모니터·에이전트 내부 게이트에 재사용할 수 있습니다. 동기·비동기 실행을 지원하고 Jev API, Mac의 로컬 Kev 또는 Laya, 일반 채팅 LLM을 백엔드로 사용할 수 있습니다.

KEY FEATURES

주요 기능

• 트레이스의 모든 평가를 단일 요청으로 처리
• 예·아니요, 선택형, 루브릭 점수형 질문 지원
• 오프라인 지표·운영 모니터·에이전트 게이트에 동일 정의 재사용
• 동기 evaluate와 비동기 aevaluate 지원
• Jev, 로컬 Kev·Laya 및 일반 채팅 LLM 백엔드 지원
• 코드 기반 검사와 typed 판단 질문 결합