센서 조합 전략
RGB + Depth 조합 — 가장 많이 쓰이는 구성
RGB 카메라 (Basler/FLIR) 깊이 센서 (RealSense/Femto Bolt)
│ │
▼ ▼
물체 인식/분류 3D 위치 계산
(MediaPipe, YOLOv8) (깊이 맵 → 좌표 변환)
│ │
└──────────── 센서 퓨전 ─────────────┘
│
▼
물체 ID + 3D 위치 출력장점: RGB로 정확한 물체 분류, 깊이로 z축 위치 보완. 가장 검증된 조합.
올인원 (RGB-D 통합 센서)
Orbbec Femto Bolt / RealSense D455
│
▼
RGB + Depth 동시 획득
│
▼
물체 인식 + 위치 추적장점: 단일 장치로 캘리브레이션 단순화. 단점: RGB 품질이 전용 산업용 카메라보다 낮음.
멀티카메라 구성 시 고려사항
| 항목 | 내용 |
|---|---|
| 하드웨어 동기화 | GPIO 트리거로 카메라 간 exposure 동기화 (<1ms 시차) |
| 소프트웨어 동기화 | 타임스탬프 기반 매칭 (비용 저렴, 정밀도 다소 낮음) |
| 캘리브레이션 | 체스보드 패턴 보드로 내부/외부 파라미터 계산 |
| FOV 오버랩 | 최소 20-30% 오버랩 권장 (추적 신뢰성), 이상적 50%+ |
| 대역폭 | USB 3.0 카메라 3대 이상 시 USB 허브/컨트롤러 분산 필요 |
천장 탑뷰 배치 전략
┌─────────────── 천장 ───────────────┐
│ │
│ [카메라1] [카메라2] │
│ ╲ ╱ │
│ ╲ 오버랩 ╱ │
│ ╲ 영역 ╱ │
├──────────╲───────╱──────────────────┤
│ ╲ ╱ │
│ ┌───────────────────┐ │
│ │ 테이블 │ │
│ │ │ │
│ └───────────────────┘ │
└─────────────────────────────────────┘2대 구성: 테이블 양쪽 상방에 각 45° 각도로 설치, 중앙부 오버랩 확보.