> For the complete documentation index, see [llms.txt](https://docs.roboflow.com/llms.txt). Markdown versions of documentation pages are available by appending `.md` to page URLs; this page is available as [Markdown](https://docs.roboflow.com/deployment/ko/monitoring-and-analytics/vision-events/operator-feedback.md).

# 운영자 피드백

운영자가 Vision Event를 검토하고 올바름, 잘못됨 또는 판단 불가로 표시하도록 합니다.

Operator Feedback를 통해 팀원들은 Vision Events를 검토하고 각 이벤트 결과가 올바른지, 잘못되었는지, 아니면 결론을 내릴 수 없는지 기록할 수 있습니다. 이렇게 하면 배포된 비전 시스템에 대한 사람 참여형 검토 프로세스가 만들어집니다.

## 피드백 제출

Vision Events 대시보드에서 아무 이벤트나 클릭하여 엽니다. 이벤트 상세 사이드바에서 다음을 할 수 있는 피드백 섹션을 볼 수 있습니다:

1. 원하면 comment 필드에 댓글을 입력합니다.
2. “Correct”, “Incorrect”, 또는 “Inconclusive”를 클릭합니다. 그러면 평점과 댓글이 즉시 저장됩니다.

피드백은 사용자 ID와 연결되므로, 팀은 각 이벤트를 누가 언제 검토했는지 볼 수 있습니다.

## API를 통한 피드백 제출

자신의 도구에서도 피드백을 보낼 수 있습니다. 다음과 함께 이벤트를 POST하세요 `eventType` 를 다음으로 설정 `operator_feedback` 그리고 메모를 최상위 수준의 `comment` 필드에 넣습니다. 다음을 참조하세요 [Vision Event 만들기](/deployment/ko/monitoring-and-analytics/vision-events/create-a-vision-event.md#http-api). 이 방식으로 전송된 피드백에는 검증된 검토자가 없으므로 "Unknown"으로 표시됩니다.

## 피드백 표시

피드백을 받은 이벤트는 이벤트 목록에 시각적 표시가 나타납니다:

* **정확** -- 녹색 엄지 척 표시
* **부정확** -- 빨간색 엄지 아래 표시
* **판단 불가** -- 노란색 표시

이를 통해 어떤 이벤트가 검토되었는지와 어떻게 평가되었는지를 빠르게 확인할 수 있습니다.

## 피드백 활동 스트림

이벤트 상세 사이드바에는 해당 이벤트에 대해 제출된 모든 피드백을 보여주는 활동 스트림이 포함되어 있습니다. 각 항목에는 검토자의 이름, 평가, 남긴 댓글, 피드백을 제출한 시간이 표시됩니다.

여러 팀원이 같은 이벤트를 검토한 경우, 그들의 모든 피드백이 활동 스트림에 표시됩니다.

## 피드백 삭제

잘못된 판정을 수정하려면 활동 스트림의 항목에서 휴지통 아이콘을 클릭한 다음 확인하세요. 그러면 해당 사람이 이벤트에 남긴 모든 판정이 제거됩니다. 그러면 피드백 양식이 다시 표시되어 새 판정을 제출할 수 있습니다. Manage Vision Events 권한이 필요합니다. 각 삭제는 다음에 기록됩니다 [감사 로그](https://docs.roboflow.com/platform/enterprise-features/audit-logs-and-siem-export).

## Operator Feedback 검토

사용 사례의 “Operator Feedback Review” 탭을 사용하여 피드백이 있는 이벤트의 이미지를 하나씩 검토하고, 유용한 이미지를 학습을 위한 프로젝트에 추가하세요. 개선할 모델을 선택한 다음 “Start Review Session”을 클릭합니다. 각 이미지에 대해 데이터셋에 추가하거나, 주석 대기열로 보내거나, 거부하거나, 보류할 수 있습니다. 완료되면 “Save & Exit”을 클릭하세요.

한 번에 한 사람만 사용 사례를 검토할 수 있습니다. 다른 사람이 검토 중이면 탭에 누가 언제 시작했는지 표시됩니다. 대기열이 비어 있는지 보려면 “Check Again”을 클릭하세요. 검토자가 “Save & Exit”을 클릭하거나 탭을 떠나거나 10분 동안 결정을 내리지 않으면 세션이 종료됩니다.

{% hint style="info" %}
Operator Feedback Review는 Enterprise 및 Growth 요금제에서 기본적으로 활성화되어 있습니다.
{% endhint %}

## 피드백 상태로 필터링

피드백 상태별로 이벤트 목록을 필터링하여 검토가 필요하거나 부정확하다고 표시된 이벤트에 집중할 수 있습니다. 다음을 참조하세요 [이벤트 쿼리](/deployment/ko/monitoring-and-analytics/vision-events/query-events.md) 에서 Feedback Status 필터에 대한 자세한 내용을 확인하세요.