HỆ THỐNG AI – CẢNH BÁO NGÃ VÀ ĐỔ RÁC SAI QUY ĐỊNH

I. KIẾN TRÚC & TÍNH NĂNG

  • Giải pháp giám sát thông minh thời gian thực tích hợp YOLOv8 Edge AI, luồng truyền tải chống
  • vỡ hình RTSP-TCP và cơ chế cảnh báo kép qua giọng nói bản địa (gTTS/Pygame) & Email sinh động.

II. KIẾN TRUC ĐA LUỒNG SONG SONG TỐC ĐỘ CAO

  1. Luồng Thu Nhận (Capture)
  • Kết nối trực tiếp camera IP qua giao thức RTSP chuyển đổi sang TCP.
  • Tham số cấu hình FFMPEG triệt tiêu hoàn toàn hiện tượng vỡ, xé hình.
  • Ép kích thước Buffer tối thiểu về 1 để xử lý khung hình mới nhất liên tục.
  • Lưu trữ dữ liệu thô trực tiếp vào RAM tốc độ cao làm trung chuyển.
  1. Luồng Trí Tuệ Nhân Tạo (AI)
  • Chạy song song bất đồng bộ, độc lập với tốc độ hiển thị hình ảnh.
  • Mô hình YOLOv8 Pose: Phân tích 17 khớp xương người, tính góc nghiêng cơ thể.
  • Mô hình YOLOv8 Object: Định danh các nhóm vật thể chứa rác (backpack, handbag, bottle…).
  • Cơ chế khóa Frame Lock đồng bộ hóa luồng an toàn, chống xung đột bộ nhớ.
  1. Luồng Giao Diện (Flask Stream)
  • Phục vụ Web Server nền tảng hiển thị giao diện phân quyền giám sát.
  • Ép chu kỳ quét đồng bộ chuẩn 25 FPS thời gian thực, hiển thị mượt mà.
  • Đè trực tiếp các hộp nhận diện AI, liên kết khung xương và vùng cấm lên luồng video.
  • Cung cấp RESTful API endpoint liên tục báo cáo trạng thái cho Client.

III. ĐẶC TÍNH KỸ THUẬT & THUẬT TOÁN NHẬN DIỆN AI

  1.Phát Hiện Người Ngã (Fall Detection)

  • Phân tích ma trận tọa độ khớp xương: Đo lường khoảng cách hình học giữa điểm Mũi (0), Hông trái (11) và Hông phải (12).
  • Giải thuật Góc Đổ: Kích hoạt khi độ lệch ngang (delta_x) lớn hơn độ lệch dọc (delta_y * 0.85), tương đương cơ thể đổ góc > 45 độ.
  • Bổ trợ Bounding Box tỷ lệ rộng/cao (W/H > 0.90) để bao quát trường hợp khuất khớp.
  • Bộ đệm chống nhiễu: Tích lũy tối thiểu 2 khung hình liên tiếp để tránh báo động giả.

  2. Phát Hiện Đổ Rác Sai Quy Định (Anti-Dumping)

  • Vùng bảo vệ linh hoạt (ROI): Cho phép người dùng vẽ tự do các đường biên bảo vệ, vùng cấm trực tiếp trên trình duyệt web.
  • Giải thuật Cổ tay vượt biên: Theo dõi khớp cổ tay trái/phải (9, 10). Kiểm tra khoảng cách hình học tới vùng bảo vệ thông qua thuật toán pointPolygonTest.
  • Phân tích hành vi kết hợp vật thể: Xác định túi rác lọt vào vùng cấm đồng thời với hành động đưa tay của con người.
  • Bộ đệm tích lũy 3 bước kiểm tra trước khi đưa ra quyết định cảnh báo sau cùng.

IV. CƠ CHẾ CẢNH BÁO KÉP TỨC THỜI ( REAL TIME ALART )

  1. Hệ Thống Giọng Nói Máy Tính Bản Địa

  • Phát trực tiếp ra hệ thống loa ngoại vi của máy tính cài đặt.
  • Sử dụng Google Text-to-Speech (gTTS) chuyển đổi thông điệp Tiếng Việt chính xác 100%.
  • Tích hợp Pygame Mixer lưu dữ liệu âm thanh trực tiếp vào RAM, không ghi ổ đĩa giúp tối ưu tốc độ.
  • Cơ chế khóa biến ‘is_speaking’ ngăn chặn hiện tượng đè âm thanh, lặp tiếng khi sự kiện kéo dài.

   2. Hệ Thống Cảnh Báo Từ Xa Qua Email & Web

  • Tích hợp thư viện SMTP bảo mật (TLS) kết nối trực tiếp cổng Gmail.
  • Tự động chụp ảnh bằng chứng (Evidence Image) tại thời điểm xảy ra sự kiện.
  • Đóng gói email định dạng chuẩn MIMEMultipart đính kèm hình ảnh trực quan gửi tới quản trị viên.
  • Front-end Web tự động đồng bộ hóa trạng thái sự kiện mỗi 1000ms để kích hoạt hệ thống còi hú tại client.

V. GIAO DIỆN GIÁM SÁT WEB TƯƠNG TÁC HIỆN ĐẠI

  1. Bảo Mật & Phân Quyền

  • Hệ thống đăng nhập xác thực thông tin tài khoản qua Flask Session bảo mật.
  • Chống truy cập trái phép luồng Video Feed khi chưa được cấp quyền.
  • Hiệu ứng chuyển cảnh CSS Smooth mượt mà tối ưu cho trải nghiệm người dùng

  2. Vẽ Vùng Cấm Trực Quan

  • Ứng dụng HTML5 Canvas overlay chính xác tuyệt đối lên trên luồng video.
  • Lắng nghe sự kiện chuột chuột (mousedown, mousemove, mouseup) để vẽ đường tự do linh hoạt.
  • Tự động chuẩn hóa tọa độ điểm ảnh theo tỷ lệ (0.0 đến 1.0) tương thích với mọi độ phân giải camera

  3. Quản Lý Vùng Giao Việc

  • Nút chức năng tích hợp gửi gói tin JSON đồng bộ về Server lập tức.
  • Hỗ trợ xóa nhanh toàn bộ ma trận vùng bảo vệ bảo trì hệ thống.
  • Tự động ép nạp giọng nói tiếng Việt chuẩn của trình duyệt (SpeechSynthesis) tăng tính tương thích.

 

Mọi thông tin chi tiết cần tư vấn về hệ thống xin liên hệ: 

Công ty TNHH dịch vụ Cơ Điện Đại Sơn

Trụ sở: 13B ngõ đình 1, TDP 11, P. Hà Đông, TP. Hà Nội

VPGD: KCN Cầu Bươu, 918 Đường Kim Giang, P. Thanh Liệt, TP. Hà Nội

Email: daisoncodien@gmail.com  

Hotline: 0868 433 369

Website: https://codiendaison.vn

VI. MỘT SỐ HÌNH ẢNH GIAO DIỆN PHẦN MỀM

Để lại một bình luận

Email của bạn sẽ không được hiển thị công khai. Các trường bắt buộc được đánh dấu *