Aplikasi Counting Objek Berbasis Computer Vision AI Camera

Description

Otomatisasi pencatatan manual yang rentan kesalahan (human error) dengan solusi edge computing berbasis AI. Aplikasi counting objek ini dirancang untuk membaca video stream langsung dari IP Camera lokal, memproses inferensi AI pada unit NVIDIA Jetson Orin di lokasi (on-premise), dan menyajikan data hitungan secara instan tanpa ketergantungan penuh pada bandwidth internet cloud.

Fitur Utama

• Edge AI Processing: Komputasi lokal berkecepatan tinggi menggunakan akselerasi TensorRT pada NVIDIA Jetson Orin Nano / Orin NX / AGX Orin.

• Multi-Stream IP Camera: Mendukung integrasi berbagai merek IP Cam industri via protokol RTSP/ONVIF dalam resolusi Full HD hingga 4K.

• Multi-Object Detection & Tracking: Menggunakan arsitektur model AI terkini (YOLO framework + ByteTrack/DeepSORT) untuk mencegah perhitungan ganda (double counting).

• Directional Counting: Menghitung objek keluar-masuk berdasarkan garis pembatas (virtual line/ROI) yang dapat disesuaikan.

• Custom Object Classes: Fleksibel untuk mendeteksi berbagai jenis objek seperti kemasan produk conveyor, kendaraan, botol, karton box, palet, hingga manusia.

• Dashboard & Export Data: Dilengkapi Web Dashboard lokal untuk monitoring statistik, log historis, serta ekspor laporan (CSV, Excel, REST API, MQTT).

Spesifikasi Teknis

Parameter	Spesifikasi
Target Hardware	NVIDIA Jetson Orin Series (Nano / NX / AGX)
Input Stream	RTSP, RTMP, HTTP, ONVIF, USB Camera
Model Framework	YOLOv8 / YOLOv10 / YOLO11 + TensorRT Engine
Tracking Algorithm	ByteTrack / DeepSORT / StrongSORT
Frame Rate (FPS)	25 – 60+ FPS (Tergantung varian Jetson Orin & resolusi input)
Akurasi Deteksi	Hingga 98%+ pada kondisi pencahayaan terkalibrasi
Integrasi Data	REST API, Webhook, MQTT, PostgreSQL/MySQL, CSV Export
Operating System	Ubuntu 22.04 LTS (JetPack 6.x)

Skenario Penggunaan (Use Cases)

• Pabrik & Manufaktur: Menghitung jumlah produk jadi di lini conveyor belt secara cepat dan konsisten.

• Gudang & Logistik: Monitoring arus bongkar-muat barang (karton, palet, karung) dari armada ke area penyimpanan.

• Traffic & Parking Management: Klasifikasi dan penghitungan volume kendaraan (motor, mobil, truk, bus) pada jalur jalan raya atau gerbang tiket.

• Retail & Smart Building: Penghitungan people flow atau foot traffic pada pintu masuk mall/gedung komersial.

Paket yang Termasuk

1. File Deployment Aplikasi & Engine AI teroptimasi Jetson Orin.

2. Web Dashboard lokal untuk pemantauan data real-time.

3. Dokumentasi instalasi, konfigurasi RTSP stream, dan pengaturan garis hitung (ROI).

4. Layanan konfigurasi model dasar (1 kelas objek standar).

5. Dukungan teknis implementasi (30 hari garansi instalasi).

1. Berapa banyak stream IP Camera yang dapat diproses oleh satu unit NVIDIA Jetson Orin secara bersamaan? Kapasitas kanal video bergantung pada varian Jetson Orin, resolusi stream, dan arsitektur model AI yang digunakan:

• Jetson Orin Nano (8GB): 2 – 4 stream (1080p @25–30 FPS).

• Jetson Orin NX (16GB): 4 – 8 stream (1080p @30 FPS).

• Jetson AGX Orin (32GB/64GB): 8 – 16+ stream (1080p @30 FPS) secara simultan.

Kinerja multi-stream dimaksimalkan melalui akselerasi hardware decoding (NVDEC) dan pipeline NVIDIA DeepStream SDK.

2. Protokol video apa saja yang didukung dan bagaimana cara meminimalkan latensi stream? Sistem mendukung protokol standar industri seperti RTSP (H.264 / H.265), ONVIF Profile S/T, RTMP, dan HTTP stream.

Latensi ditekan hingga di bawah 150 ms dengan:

• Memanfaatkan akselerasi dekoder hardware Jetson (nvv4l2decoder / NVDEC).

• Menyesuaikan konfigurasi RTSP ke mode UDP dengan zero-latency buffer pada pipeline GStreamer.

• Menyamakan resolusi inferensi model dengan downscale hardware langsung di pipeline video.

3. Bagaimana sistem menangani objek yang bertumpuk (occlusion) atau pencahayaan yang tidak konsisten?

• Occlusion & Re-identification: Sistem mengombinasikan detektor objek terkompilasi TensorRT dengan algoritma pelacak ByteTrack / DeepSORT. Setiap objek diberi ID unik yang tetap terkunci meskipun objek terhalang sementara atau bergerak berdekatan.

• Kondisi Cahaya Rendah / Silau: Modul mendukung pra-pemrosesan citra (seperti CLAHE / Contrast Limited Adaptive Histogram Equalization) dan fine-tuning dataset spesifik kondisi lapangan menggunakan anotasi citra lokal.

4. Apakah sistem memerlukan koneksi internet aktif agar proses counting berjalan? Tidak. Seluruh pemrosesan — mulai dari decoding video, inferensi model AI, kalkulasi garis virtual (ROI), hingga penyimpanan log — berjalan 100% secara lokal (on-premise edge computing) di Jetson Orin.

Koneksi jaringan lokal (LAN) hanya diperlukan untuk komunikasi dengan IP Camera, sedangkan akses internet hanya dibutuhkan jika Anda mengaktifkan sinkronisasi cloud dashboard, notifikasi eksternal, atau remote management.

5. Bagaimana cara mengintegrasikan data hasil counting ke sistem industri (PLC, SCADA, atau ERP)? Sistem menyediakan antarmuka integrasi standar industri:

• Software / Cloud: REST API lokal, Webhook, dan MQTT client (JSON payload instan saat objek terhitung).

• Otomasi Pabrik: Dukungan Modbus TCP/IP serta output sinyal digital via pin GPIO Jetson (misal: trigger relay saat kuota hitungan tercapai).

• Database Langsung: Penyimpanan log ke PostgreSQL, MySQL, SQLite, atau InfluxDB/TimescaleDB untuk time-series analytics.