AI nhận diện vật thể với ibaCapture, ibaVision và ibaPDA: từ camera đến dữ liệu quá trình

Khung hình camera có khung nhận diện vật thể, kết quả đưa vào ibaPDA

Camera trong nhà máy thường chỉ để người xem. Khi thêm AI nhận diện vật thể, hình ảnh trở thành dữ liệu: vị trí, số lượng, tốc độ của vật thể được tính tự động và có thể đưa vào hệ thống giám sát như mọi tín hiệu khác.

Bài này tóm tắt một ví dụ trình diễn của iba: dùng AI theo dõi quả bóng trong trò bi lắc (bóng đá bàn), nơi bóng có thể chạy tới khoảng 56 km/h. Bài toán vui, nhưng các bước làm giống hệt bài toán công nghiệp.

Nhận diện vật thể là gì

  • Phát hiện (detection): tìm vật thể trong ảnh và vẽ khung bao quanh.
  • Nhận dạng (identification): cho biết vật thể đó là gì.
  • Theo dõi (tracking): nối vị trí qua nhiều khung hình để biết quỹ đạo, tốc độ.

Khác với cách xử lý ảnh truyền thống dựa trên ngưỡng màu, độ sáng, mô hình học sâu học từ ảnh mẫu nên chịu được thay đổi ánh sáng, góc nhìn và nền phức tạp tốt hơn.

Kiến trúc hệ thống với iba

Thành phầnVai trò
CameraCamera IP (khoảng 30 khung hình/giây) hoặc camera công nghiệp GigE tốc độ cao
ibaCaptureGhi hình đồng bộ thời gian với dữ liệu quá trình
ibaVisionChạy thuật toán xử lý ảnh, mô hình AI
Máy chủ GPUCard NVIDIA hỗ trợ CUDA, ví dụ dòng RTX A2000 12 GB
ibaPDANhận kết quả nhận diện như các tín hiệu đo khác

Điểm mạnh là kết quả AI nằm cùng trục thời gian với dữ liệu PLC, cảm biến. Khi xem lại một sự cố, kỹ sư thấy cả hình ảnh, kết quả nhận diện và tín hiệu quá trình ở cùng thời điểm. Về ghi hình đồng bộ, xem bài giám sát camera đồng bộ với ibaCapture.

Các bước xây dựng mô hình

  1. Thu ảnh: ghi video thật tại vị trí lắp, đủ các điều kiện ánh sáng, tốc độ.
  2. Gán nhãn: đánh dấu vật thể trên ảnh bằng công cụ gán nhãn (ví dụ Roboflow).
  3. Huấn luyện: huấn luyện mô hình YOLO (thư viện Ultralytics) trên bộ dữ liệu riêng, có thể dùng Google Colab ở giai đoạn thử.
  4. Đánh giá: kiểm tra độ chính xác trên ảnh chưa dùng để huấn luyện.
  5. Triển khai: đưa mô hình lên máy chủ GPU, nối với camera và ibaPDA.

Từ khung hình đến số liệu

Nhận diện được vật thể mới là bước đầu. Để có số liệu dùng được, ví dụ trình diễn kết hợp thêm:

  • Theo dõi điểm đặc trưng để nối vị trí qua các khung hình.
  • Phân cụm màu (KMeans) để tách và gán màu cho từng nhóm vật thể.
  • Nội suy vị trí khi vật thể bị che khuất vài khung hình.
  • Bù chuyển động của camera.
  • Biến đổi phối cảnh (homography, OpenCV) để đổi tọa độ ảnh sang tọa độ thật.
  • Tính tốc độ và quãng đường di chuyển của vật thể.

Ứng dụng trong nhà máy

  • Theo dõi vị trí, tốc độ vật liệu trên băng tải, con lăn.
  • Đếm sản phẩm, phát hiện thiếu, lệch, rơi.
  • Phát hiện người hoặc phương tiện đi vào vùng nguy hiểm.
  • Ghi nhận tự động khi có bất thường để xem lại cùng dữ liệu quá trình.
  • Giảm phụ thuộc vào quan sát thủ công, giảm sai sót do người.

Lưu ý khi áp dụng

  • Độ chính xác phụ thuộc nhiều vào chất lượng và số lượng ảnh huấn luyện từ chính hiện trường.
  • Cần chỉnh vị trí, ống kính, tốc độ khung hình của camera cho phù hợp tốc độ vật thể.
  • Nên làm thử ở một vị trí, đánh giá độ chính xác rồi mới mở rộng.
  • Bài toán phức tạp có thể cần đơn vị chuyên về AI phối hợp cùng.

Kết quả nhận diện khi đã thành tín hiệu có thể dùng cho giám sát tình trạng thiết bị và cảnh báo, xem thêm condition monitoring với iba.

Câu hỏi thường gặp

Có cần camera đặc biệt không?

Không bắt buộc. Camera IP thông thường dùng được cho vật thể chậm; vật thể nhanh cần camera công nghiệp tốc độ khung hình cao.

Mô hình AI chạy ở đâu?

Chạy trên máy chủ tại nhà máy có card GPU, không cần gửi hình ảnh ra ngoài.

Có dùng được với hệ thống ibaPDA sẵn có?

Được. Kết quả nhận diện được đưa vào ibaPDA như các tín hiệu khác và ghi cùng dữ liệu hiện có.

Iba và TMP

Tăng Minh Phát cung cấp hệ thống Iba tại Việt Nam: ibaPDA, ibaCapture, ibaVision và tư vấn bài toán xử lý hình ảnh trong nhà máy. Xem thêm giải pháp thu thập, phân tích dữ liệu iba.

Ví dụ thực tế khác: AI phát hiện đai buộc cuộn bằng YOLOv8 và ibaVision, từ lúc OpenCV thất bại đến khi mô hình chạy ổn định.

Thông tin cần gửi khi cần tư vấn

  • Vật thể cần nhận diện và tốc độ di chuyển
  • Vị trí lắp, khoảng cách, điều kiện ánh sáng
  • Camera đang có (nếu có)
  • Kết quả mong muốn: đếm, đo tốc độ, cảnh báo
  • Hệ thống iba hoặc SCADA đang dùng

Liên hệ kỹ sư TMP:

Similar Posts