WHAT IT DOES

무엇을 하나요?

세 언어로 작성된 실제 비행 검색 질의를 이용해 검색 의도 파싱 성능을 평가한다. 질의는 중복 제거와 비식별화, 수작업 라벨링을 거쳤으며 모든 모델이 같은 조건에서 평가된다. 열한 명의 독립 평가자가 각 모델이 여행자의 의도를 포착했는지 판정한다.

KEY FEATURES

주요 기능

• 세 언어로 구성된 실제 비행 검색 질의 사용
• 질의 중복 제거 및 비식별화
• 수작업으로 라벨링된 평가 데이터
• 모든 모델에 동일한 평가 조건 적용
• 열한 명의 독립 평가자 판정
• 차원별 통과율과 태그별 실패 사례 표시