Giám sát sản xuất, an toàn lao động và kiểm soát hàng hoá bằng thị giác máy tính
SOAI là nền tảng giám sát thông qua hình ảnh, xây cho doanh nghiệp sản xuất và quản lý hàng hoá tại Việt Nam. Kiến trúc plugin có hai lớp trừu tượng: AnalysisEngine cho phân tích và DeviceProvider cho nguồn hình. Mỗi bài toán khách hàng được ghép từ các module thị giác đã kiểm thử và triển khai với phần cứng tương ứng: camera IP, hộp xử lý biên, hoặc tích hợp trực tiếp vào camera hãng khi hạ tầng cho phép.
Từ hiện trường đến báo cáo
Kiểm soát hàng hoá
Hiện trạng
Khâu đóng gói và xuất/nhập kho khó đối chiếu chính xác: đơn hàng lẫn mã, số lượng đếm tay sai lệch, khiếu nại không có bằng chứng để tra lại.
Hệ thống làm gì
Bóc tách mã QR/mã vạch ngay trong video đóng gói và gắn mốc thời gian cho từng đơn (mở lại đúng đoạn clip khi có khiếu nại); đếm SKU dày đặc trên ảnh bằng mô hình phát hiện vật thể, xuất ảnh có khung nhận diện để đối soát thủ công khi cần; đối chiếu số lượng đếm được với phiếu xuất/nhập kho.
Yêu cầu thiết bị
Camera IP cố định tại trạm đóng gói (ONVIF/RTSP), hoặc camera có sẵn tại kho.
Dữ liệu đi đâu
Hình ảnh xử lý trong mạng nội bộ; kết quả (số lượng, mốc thời gian, ảnh có khung nhận diện) lưu tại hệ thống on-prem hoặc server riêng của khách hàng.
An toàn lao động
Hiện trạng
Vi phạm bảo hộ lao động và xâm nhập vùng nguy hiểm thường chỉ được phát hiện sau khi sự cố xảy ra, vì giám sát thủ công không thể phủ hết ca và hết khu vực.
Hệ thống làm gì
Phát hiện thiếu trang bị bảo hộ (mũ, vest) và người xuất hiện trong vùng hạn chế; các nghiệp vụ kiểm tra tuỳ biến, mô tả bằng lời kèm vài ảnh mẫu, được thêm vào hệ thống theo yêu cầu cụ thể của từng nhà máy, không cần huấn luyện lại mô hình từ đầu. Mọi phát hiện được chấm điểm độ tin cậy và đưa vào hàng chờ cho người vận hành duyệt, không có bước tự động hành động.
Yêu cầu thiết bị
Camera IP tại khu vực nguy hiểm/lối vào hạn chế; hộp xử lý biên khi cần suy luận tại chỗ.
Dữ liệu đi đâu
Suy luận có thể chạy tại biên (edge) để giảm băng thông và giữ hình ảnh trong cơ sở khách hàng; log quyết định lưu để truy vết sau này.
Giám sát vận hành
Hiện trạng
Quản lý ca sản xuất cần xem lại một khoảng thời gian cụ thể (một sự cố, một ca làm) nhưng không có công cụ tra cứu nhanh, chỉ có video thô lưu rời rạc.
Hệ thống làm gì
Xem trực tiếp nhiều camera, chụp ảnh nhanh thủ công hoặc theo lịch định kỳ, liệt kê bản ghi theo thiết bị và cắt trích xuất chính xác theo khoảng thời gian cần xem, phục vụ điều tra sự cố hoặc báo cáo ca.
Yêu cầu thiết bị
Toàn bộ camera đã kết nối trong hệ thống quản lý thiết bị.
Dữ liệu đi đâu
Luồng hình và bản ghi lưu trữ nội bộ; quyền truy cập theo tài khoản, chống truy cập tệp ngoài phạm vi cho phép.
POC SOAI: 6 module đã nghiệm thu
Mỗi module dưới đây đã được kiểm thử và nghiệm thu trong POC, với stack kỹ thuật tương ứng.
| Module | Năng lực | Nền tảng kỹ thuật |
|---|---|---|
| Phân tích video đóng gói | Bóc tách mã QR trong video đóng hàng, gắn mốc thời gian bắt đầu/kết thúc cho từng đơn, tra được clip của bất kỳ khiếu nại nào trong vài giây. | OpenCV · pyzbar · Celery |
| Đếm SKU trên ảnh | Đếm vật thể dày đặc trong dưới 3 giây, xuất ảnh có khung phát hiện và lưu phiên bản mô hình đã dùng, đối soát được số liệu về sau. | YOLOv8 · SAHI |
| Kiểm tra đúng/sai | Nghiệp vụ mới định nghĩa bằng lời và vài ảnh mẫu, không cần huấn luyện lại. Mở rộng sang bài toán kiểm tra mới mất một ngày. | VLM · few-shot |
| Quản lý thiết bị | Khai báo và kiểm tra kết nối camera/thiết bị tập trung, mật khẩu mã hoá khi lưu, vận hành nhiều điểm camera từ một nơi. | FastAPI · Fernet |
| Live view & snapshot | Xem trực tiếp nhiều camera cùng lúc, chụp ảnh thủ công hoặc theo lịch định kỳ, giám sát chủ động thay vì chỉ xem lại sau sự cố. | MJPEG · Celery Beat |
| Ghi & trích xuất video | Liệt kê bản ghi theo thiết bị và cắt clip chính xác theo khoảng thời gian yêu cầu, phục vụ điều tra sự cố và làm bằng chứng. | FFmpeg |
Ảnh chụp trực tiếp từ hệ thống SOAI
Xem toàn bộ luồng thao tác
Video minh hoạ thao tác trên hệ thống SOAI, sử dụng dữ liệu minh hoạ.
Từ giám sát hàng hoá đến camera hãng
Giai đoạn 1: Xây dựng hệ thống giám sát hàng hoá
Hệ thống giám sát tại chỗ và khâu đóng hàng online: sáu module ở trên, đã nghiệm thu POC.
Giai đoạn 2: Nhúng AI vào camera qua ACAP
Nhúng mô hình phát hiện trực tiếp vào camera Axis và Hikvision qua ACAP là giai đoạn 2 của lộ trình SOAI. Hiện chưa triển khai; đang tìm hiểu điều kiện tham gia chương trình đối tác của từng hãng.
Giai đoạn 3: Mở rộng phạm vi giám sát
Mở rộng sang an toàn lao động, lưu thông hàng hoá và kiểm soát số lượng/tồn kho trên toàn bộ quy mô doanh nghiệp. Chưa triển khai.
AI đề xuất - người vận hành quyết định
Hệ thống phát hiện, chấm điểm độ tin cậy, và đề xuất hành động. Không có bước nào tự thực hiện mà thiếu người duyệt.
Phát hiện: công nhân không đội mũ bảo hộ · Line 2
Camera khu vực đóng gói · khung hình 14:02:37
Hành động kiểm duyệt
Phát hiện: công nhân không đội mũ bảo hộ · Line 2
- Số lượng SKU đếm được lệch so với phiếu xuất kho87%
- Phát hiện người ở khu vực hạn chế không đeo bảo hộ78%
Trao đổi kỹ thuật về SOAI
Gửi bài toán cụ thể của nhà máy hoặc kho hàng. Đội kỹ thuật SOAI phản hồi bằng đề xuất triển khai, kèm module và stack phù hợp.
Trao đổi kỹ thuật về SOAI