AI & Tự độngThị giác máy tính / AI

Human Action Recognition System

Phân loại hành động nhiều người theo thời gian thực bằng YOLOv8, ByteTrack và phân tích khung xương ST-GCN.

Về dự án này

Giám sát video tạo ra lượng dữ liệu khổng lồ hiếm khi được xem lại. Hệ thống nhận diện hành động phân loại sự việc theo thời gian thực và đánh dấu các tình huống quan trọng.

Pipeline gồm ba bước: YOLOv8 phát hiện người, ByteTrack duy trì định danh qua các khung hình, rồi MediaPipe trích xuất khớp xương để ST-GCN phân loại chuyển động theo thời gian.

ST-GCN phân tích quan hệ hình học giữa các khớp trên một khoảng thời gian nên ổn định hơn phân loại từng ảnh tĩnh.

Hệ thống nhận diện hơn 20 hành động như ngã, đánh nhau, chạy, vận hành máy và mang đồ. Ngưỡng sai được điều chỉnh riêng theo mức độ rủi ro của từng nhóm.