Xây dựng hệ thống điều khiển không chạm bằng cử chỉ tay dựa trên thị giác máy tính

Tóm tắt

Trong môi trường làm việc và học tập hiện đại, hoạt động thuyết trình giữ vai trò quan trọng trong nhiều lĩnh vực như giáo dục, doanh nghiệp, hội thảo và đào tạo. Theo cách truyền thống, người thuyết trình cần phải phụ thuộc vào các thiết bị điều khiển như chuột, bàn phím hoặc bút laser để điều hướng qua các trang trình chiếu và truyền đạt thông tin. Mặc dù đáp ứng được các nhu cầu cơ bản, những thiết bị này vẫn bộc lộ hạn chế về tính di động, tính liên tục và sự phụ thuộc vào thời lượng pin của thiết bị.  Để giải quyết những vấn đề trên, các hệ thống thuyết trình điều khiển bằng cử chỉ tay nổi lên như một giải pháp đầy hứa hẹn nhờ vào khả năng tương tác trực quan, tự nhiên và hấp dẫn. Bài báo này đề xuất một hệ thống điều khiển trình chiếu Microsoft PowerPoint dựa trên nhận diện cử chỉ tay sử dụng kỹ thuật thị giác máy tính. Cụ thể, hệ thống sử dụng camera tích hợp của máy tính cùng với các thư viện OpenCV cho việc thu nhận và tiền xử lý khung ảnh, framework MediaPipe trích xuất điểm mốc của bàn tay, từ đó ánh xạ thành lệnh điều khiển. Kết quả thực nghiệm bước đầu cho thấy hệ thống hoạt động ổn định, đáp ứng được tính thời gian thực và góp phần nâng cao trải nghiệm của người nói lẫn người nghe thông qua tương tác người-máy tự nhiên, không chạm.