Web inference-sdk

inference-sdk로 Roboflow Cloud에서 실행되는 브라우저 기반 실시간 비디오 추론을 수행합니다.

WebRTC Streaming이란?

@roboflow/inference-sdk WebRTC를 사용하여 브라우저에서 Roboflow의 inference servers로 실시간 비디오 스트리밍을 가능하게 합니다. 이를 통해 다음을 할 수 있습니다:

• Workflows 실행 - 복잡한 다단계 컴퓨터 비전 파이프라인 실행

• 모든 Model에 액세스 - 모든 Roboflow model type 사용

• 서버 측 처리 - 강력한 GPU 활용

• 낮은 지연 시간 - WebRTC는 거의 실시간에 가까운 결과를 제공합니다

• 양방향 통신 - 스트리밍 중 데이터 송수신

설치

npm install @roboflow/inference-sdk

빠른 시작

시작하려면 아래의 video/sample code를 살펴보세요:

import { connectors, webrtc, streams } from '@roboflow/inference-sdk';

// ⚠️ 개발용으로만 withApiKey를 사용하세요
// ⚠️ 프로덕션에서는 이 방법을 사용하지 마세요. API 키가 노출됩니다
// 프로덕션에서는 백엔드 프록시를 사용하세요(다음 섹션 참조)
const connector = connectors.withApiKey("your-api-key");

// 카메라 스트림 가져오기
const stream = await streams.useCamera({
  video: {
    facingMode: { ideal: "environment" },
    width: { ideal: 640 },
    height: { ideal: 480 }
  }
});

// WebRTC 연결 시작
const connection = await webrtc.useStream({
  source: stream,
  connector,
  wrtcParams: {
    workspaceName: "your-workspace",
    workflowId: "your-workflow",
    imageInputName: "image",
    streamOutputNames: ["output"],
    dataOutputNames: ["predictions"]
  },
  onData: (data) => {
    console.log("Inference results:", data);
  }
});

// 처리된 비디오 표시
const videoElement = document.getElementById('video');
videoElement.srcObject = await connection.remoteStream();

// 완료되면 정리
await connection.cleanup();

🔐 보안 모범 사례

프로덕션 애플리케이션의 프런트엔드 코드에서 API 키를 절대 노출하지 마세요.

해당 connectors.withApiKey() 메서드는 데모에는 편리하지만 브라우저에 API 키를 노출합니다. 프로덕션에서는 항상 백엔드 프록시를 사용하세요:

안전한 프로덕션 패턴

프런트엔드:

import { connectors, webrtc, streams } from '@roboflow/inference-sdk';

// 직접 API 키 대신 프록시 엔드포인트 사용
const connector = connectors.withProxyUrl('/api/init-webrtc');

const stream = await streams.useCamera({ video: true });
const connection = await webrtc.useStream({
  source: stream,
  connector,
  wrtcParams: { /* ... */ }
});

백엔드(Express):

import { InferenceHTTPClient } from '@roboflow/inference-sdk/api';

app.post('/api/init-webrtc', async (req, res) => {
  const { offer, wrtcparams } = req.body;

  // API 키는 서버에서 안전하게 유지됩니다
  const client = InferenceHTTPClient.init({
    apiKey: process.env.ROBOFLOW_API_KEY
  });

  const answer = await client.initializeWebrtcWorker({
    offer,
    workspaceName: wrtcparams.workspaceName,
    workflowId: wrtcparams.workflowId,
    config: {
      imageInputName: wrtcparams.imageInputName,
      streamOutputNames: wrtcparams.streamOutputNames,
      dataOutputNames: wrtcparams.dataOutputNames
    }
  });

  res.json(answer);
});

주요 기능

동적 출력 재구성

재시작 없이 런타임에 stream 및 data 출력을 변경:

// 다른 시각화로 전환
connection.reconfigureOutputs({
  streamOutput: ["blur_visualization"]
});

// 모든 data 출력 활성화
connection.reconfigureOutputs({
  dataOutput: ["*"]
});

// 둘 다 한 번에 변경
connection.reconfigureOutputs({
  streamOutput: ["annotated_image"],
  dataOutput: ["predictions", "counts"]
});

완전한 작동 예제

프런트엔드와 백엔드 코드를 모두 포함한 전체 작동 예제는 다음을 참조하세요: 샘플 애플리케이션 저장소. 샘플 앱은 다음을 보여줍니다:

• API 키 보안을 위한 올바른 백엔드 프록시 설정

• 카메라 스트리밍 통합

• 오류 처리 및 연결 관리

• 프로덕션에 바로 사용할 수 있는 패턴

리소스

• 예제 애플리케이션

• NPM의 패키지