> For the complete documentation index, see [llms.txt](https://docs.roboflow.com/llms.txt). Markdown versions of documentation pages are available by appending `.md` to page URLs; this page is available as [Markdown](https://docs.roboflow.com/deployment/ko/monitoring-and-analytics/vision-events/operator-feedback.md).

# 운영자 피드백

운영자가 Vision Event를 검토하고 올바름, 잘못됨 또는 판단 불가로 표시하도록 합니다.

운영자 피드백을 사용하면 팀원이 비전 이벤트를 검토하고 각 이벤트의 결과가 정확한지, 부정확한지, 아니면 판단하기 어려운지 기록할 수 있습니다. 이를 통해 배포된 비전 시스템에 사람이 참여하는 검토 절차를 마련할 수 있습니다.

## 피드백 제출

이벤트를 클릭해 비전 이벤트 대시보드에서 이벤트를 엽니다. 이벤트 세부정보 사이드바의 피드백 섹션에서 다음 작업을 할 수 있습니다.

1. 선택 사항으로 댓글 입력란에 의견을 작성합니다.
2. "정확함", "부정확함" 또는 "판단 불가"를 클릭합니다. 평가와 댓글이 즉시 저장됩니다.

피드백은 사용자 ID와 연결되므로 팀에서 각 이벤트를 누가 언제 검토했는지 확인할 수 있습니다.

## API를 통한 피드백 제출

자체 도구에서도 피드백을 보낼 수 있습니다. 다음과 같이 설정한 이벤트를 POST합니다. `eventType` 를 다음 값으로 설정하고 `operator_feedback` 최상위 `comment` 필드에 의견을 입력합니다. 자세한 내용은 [비전 이벤트 만들기](https://docs.roboflow.com/deployment/ko/monitoring-and-analytics/vision-events/create-a-vision-event.md#http-api)를 참조하세요. 이 방법으로 보낸 피드백에는 확인된 검토자 정보가 없으므로 검토자가 "알 수 없음"으로 표시됩니다.

## 피드백 표시

피드백이 등록된 이벤트는 이벤트 목록에 시각적 표시가 나타납니다.

* **정확함** -- 녹색 엄지손가락 위쪽 표시
* **부정확함** -- 빨간색 엄지손가락 아래쪽 표시
* **판단 불가** -- 노란색 표시

이 표시를 통해 어떤 이벤트가 검토되었고 어떤 평가를 받았는지 빠르게 확인할 수 있습니다.

## 피드백 활동 스트림

이벤트 세부정보 사이드바의 활동 스트림에는 해당 이벤트에 제출된 모든 피드백이 표시됩니다. 각 항목에는 검토자 이름, 평가, 남긴 댓글, 피드백 제출 시각이 표시됩니다.

여러 팀원이 같은 이벤트를 검토한 경우, 모든 피드백이 활동 스트림에 표시됩니다.

## 피드백 삭제

잘못된 판정을 수정하려면 활동 스트림에서 해당 항목의 휴지통 아이콘을 클릭한 다음 확인합니다. 그러면 해당 사용자가 이벤트에 남긴 모든 판정이 삭제됩니다. 이후 피드백 양식이 다시 표시되므로 새 판정을 제출할 수 있습니다. 이 작업에는 비전 이벤트 관리 권한이 필요합니다. 삭제할 때마다 [감사 로그](https://docs.roboflow.com/platform/enterprise-features/audit-logs-and-siem-export).

## 운영자 피드백 검토

사용 사례에서 "운영자 피드백 검토" 탭을 사용하면 피드백이 등록된 이벤트의 이미지를 한 번에 하나씩 검토하고, 학습에 유용한 이미지를 프로젝트에 추가할 수 있습니다. 개선할 모델을 선택한 다음 "검토 세션 시작"을 클릭합니다. 각 이미지를 데이터세트에 추가하거나, 주석 대기열로 보내거나, 거부하거나, 나중에 검토하도록 미룰 수 있습니다. 작업을 마치면 "저장 후 종료"를 클릭합니다.

한 번에 한 명만 사용 사례를 검토할 수 있습니다. 다른 사람이 검토 중이면 탭에 검토자와 시작 시각이 표시됩니다. 대기열을 사용할 수 있는지 확인하려면 "다시 확인"을 클릭합니다. 검토자가 "저장 후 종료"를 클릭하거나 탭을 벗어나거나 10분 동안 결정을 내리지 않으면 세션이 종료됩니다.

{% hint style="info" %}
운영자 피드백 검토는 Enterprise 요금제와 이전 Growth 요금제에서 기본적으로 사용 설정되어 있습니다.
{% endhint %}

## 피드백 상태로 필터링

피드백 상태로 이벤트 목록을 필터링하면 검토가 필요한 이벤트나 부정확한 것으로 표시된 이벤트에 집중할 수 있습니다. 자세한 내용은 [이벤트 쿼리](https://docs.roboflow.com/deployment/ko/monitoring-and-analytics/vision-events/query-events.md) 에서 피드백 상태 필터를 참조하세요.
