Nhận diện và phát hiện hành vi của con

người sử dụng mô hình học sâu LSTM

Giảng viên hướng dẫn: TS Nguyễn Xuân Thuận
Nhóm : 10
Sinh viên thực hiện : Đào Tiến Dũng - 20194969
Ngô Văn Vũ - 20195235

2
NỘI DUNG

1 Tổng quan về đề tài Nguồn dữ liệu 2

3 Chia lớp dữ liệu Phần mềm sử dụng 4

3
1. Tổng quan về đề tài:

• Mô hình dự đoán tư thế của con người từ hình ảnh, video bằng
cách dự đoán các điểm trên cơ thể người, từ đó sẽ nhận diện được
hành vi tương ứng

4
1. Tổng quan về đề tài:

Các ứng dụng:

• Nhận dạng hành vi bất thường như
ngã, đột quỵ, hỗ trợ con người trong
việc giám sát, đưa ra cảnh báo

• Giám sát an ninh: khi có các hành vi

như đánh nhau, đập phá đồ, xâm nhập
vào vùng cấm, sẽ đưa ra cảnh báo

• Điều khiển các thiết bị thông minh

bằng cử chỉ tay, khuôn mặt

5
 2. Nguồn dữ liệu

• Tạo dữ liệu bằng việc thu thập các khung hình qua camera máy tính
• Sử dụng thư viện Mediapipe của google để trích xuất các điểm trên cơ thể
• Chia dữ liệu thành train_set và test_set với tỉ lệ 80/20

6
3. Thuật toán

- Sử dụng mô hình học sâu LSTM vì:

+Bài toán dự đoán hành vi lấy thông tin đầu vào là dạng video=> Dữ liệu là các khung hình
xuất hiện tuần tự
+ Có nhiều ưu điểm hơn so với RNN

RNN
LSTM

7
 4. Phần mềm sử dụng

 Training (tạo mô hình) trên Google Colab

- Để tận dụng được tốc độ GPU của máy chủ Google ta
sẽ sử dụng Google Colab để train model nhằm cải thiện
tốc độ và tiết kiệm thời gian
• Sử dụng ngôn ngữ lập trình Python, phần mềm
Pycharm
- Dùng để thu thập dữ liệu
- Lập trình các chức năng liên quan

8
THANK YOU !