결과

field 추출 통계와 테스트 결과를 확인하여 Document skill 품질을 평가하고 개선합니다.

스킬을 게시하기 전에 field 추출 품질을 확인하여 스킬이 올바르게 구성되었는지 점검해야 합니다. 스킬을 테스트하려면 Test Skill을 클릭합니다. 스킬을 테스트하면 프로그램이 기준 레이블링을 추출 결과와 비교합니다.

Results 탭에서 스킬에 대한 문서 추출 결과 통계를 확인할 수 있습니다. 이 통계를 분석하면 추출된 데이터의 품질을 어떻게 개선할 수 있는지 파악하는 데 도움이 됩니다.

스킬에 의해 추출된 모든 field는 Fields 열에 표시됩니다. field 그룹에 속한 field는 해당 field 그룹 이름을 가진 축소된 드롭다운 목록으로 묶여 표시됩니다.

​

Field 추출 통계

다음과 같은 field 추출 통계를 확인할 수 있습니다:

1. Accuracy 열에는 field 값이 올바르게 추출된 비율(ALL FIELDS 행)과 개별 field에 대해 올바르게 추출된 값의 비율이 표시됩니다.
   • 개별 field의 Accuracy 값은 **Accuracy** = **Correct** / (**Correct** + **Recognition Issues** + **Located Incorrectly** + **Not Detected**) 로 계산됩니다.
   • ALL FIELDS Accuracy 값도 동일한 공식으로 계산되며, 분모에 들어가는 값들은 모든 field에 대한 합계입니다.
2. Correct 열에는 추출된 값이 기준(reference) 값과 일치하는 field 인스턴스의 개수가 표시됩니다.
3. Recognition Issues 열에는 문서에서 감지되었지만 올바르게 인식되지 않은 field 인스턴스의 개수가 표시됩니다.
4. Located Incorrectly 열에는 라벨링에서 지정한 위치와 다른 위치에서 영역이 감지되어, 그 값이 예측 값과 달라진 field 인스턴스의 개수가 표시됩니다.
5. Not Detected 열에는 감지되지 않은 field 인스턴스의 개수가 표시됩니다.
6. Frequency in Documents 열에는 해당 field를 포함하는 문서의 비율이 표시됩니다.

기본적으로 이러한 통계는 모든 field에 대해 표시됩니다. 목록에서 개별 field를 숨기고 필요한 field에 대한 통계만 볼 수 있습니다. 이를 위해 Fields 열 상단의 필터 icon을 클릭한 다음 원하는 field를 선택하십시오.

​

비교 모드

2~5열의 값을 클릭하면 기준 레이블링과 예측 레이블링 비교 모드로 전환할 수 있습니다. 비교 모드를 사용하면 문서 이미지에서 기준 레이블링과 예측 레이블링 간의 차이를 분석할 수 있습니다. 이를 통해 기준 레이블링의 오류뿐 아니라 활동 재구성이 필요할 수 있는 문제 field를 식별할 수 있습니다.

​

활동별 통계

field 추출 통계는 Activity Editor의 Results 탭에서 개별 활동별로도 확인할 수 있습니다. 활동별 통계에는 해당 활동이 추출한 field에 대한 데이터만 포함됩니다. 활동별 통계를 분석하면 활동 설정이 올바른지 평가하여, 스킬의 field 추출 품질을 향상시키는 데 도움이 됩니다.

라벨링이 확정되지 않은 문서는 테스트 결과에서 제외됩니다. 예측 라벨링을 기반으로 참조 라벨링이 자동 생성된 경우, 문서 컨텍스트 메뉴에서 제공되는 옵션을 사용해 예측 라벨링을 참조 라벨링으로 복사하지 않는 한, 해당 문서는 라벨링이 확정되지 않은 것으로 간주됩니다. 각 문서의 라벨링 상태는 Documents 탭에서 확인할 수 있습니다. 문서의 라벨링을 확정하려면 Fields 탭에서 해당 문서를 검토해야 합니다.