Đề cương khóa học
Giới thiệu về Tương tác giữa Con người và Robot (HRI)
- Tổng quan về HRI và bản chất đa ngành của nó
- Ứng dụng trong ngành công nghiệp, y tế và robot dịch vụ
- Nguyên tắc thiết kế hướng đến con người cho hệ thống tương tác
Tương tác bằng giọng nói và kiểm soát dựa trên ngôn ngữ nói
- Cơ bản về nhận dạng giọng nói và hiểu ngôn ngữ tự nhiên
- Phát triển các lệnh và phản hồi bằng giọng nói sử dụng Python
- Tích hợp giao diện ngôn ngữ nói với robot dựa trên ROS
Nhận dạng cử chỉ và giao tiếp phi ngôn ngữ
- Vai trò của cử chỉ và ngôn ngữ cơ thể trong giao tiếp giữa con người và robot
- Sử dụng thị giác máy tính để nhận dạng và phân loại cử chỉ
- Triển khai nhận dạng cử chỉ thời gian thực với OpenCV và mô hình AI
Hợp tác và Kiểm soát Chia sẻ
- Nguyên tắc của hợp tác giữa con người và robot và tự chủ chung
- Khung an toàn cho tương tác vật lý và nhận thức
- Tích hợp phản hồi cảm biến và kiểm soát thích ứng để thực hiện các nhiệm vụ cộng tác
Thiết kế Hệ thống Tương tác Đa phương thức
- Kết hợp giọng nói, cử chỉ và phản hồi thị giác
- Quản lý bối cảnh và ý định của người dùng trong hệ thống đa phương thức
- Triển khai một nguyên mẫu HRI đơn giản dựa trên mô phỏng
Yếu tố Con người, Đạo đức và An toàn trong HRI
- Cảm nhận của con người, lòng tin và sự chấp nhận trong hệ thống robot
- Xem xét đạo đức trong robot cộng tác
- Đánh giá khả năng sử dụng và an toàn của các giao diện tương tác
Dự án Thực hành: Xây dựng Robot Cộng tác Điều khiển bằng Giọng nói và Cử chỉ
- Thiết kế kiến trúc hệ thống và xác định các chế độ tương tác
- Triển khai các mô-đun ngôn ngữ nói và cử chỉ
- Tích hợp và kiểm thử nguyên mẫu HRI hoàn chỉnh
Tổng kết và Bước tiếp theo
Yêu cầu
- Hiểu biết cơ bản về khái niệm robot và lập trình Python
- Am hiểu về giao diện máy móc hoặc hệ thống kiểm soát
- Quan tâm đến thiết kế tương tác, cảm nhận hoặc AI ứng dụng
Đối tượng
- Nghiên cứu viên HRI nghiên cứu về sự hợp tác giữa con người và robot
- Nhà thiết kế sản phẩm phát triển robot tương tác hoặc hỗ trợ
- Kỹ sư khám phá hệ thống tương tác và kiểm soát đa phương thức
Đánh giá (2)
Cung cấp các tài liệu (máy ảo) để bạn có thể bắt ngay vào các bài tập, cùng với phần giải thích về cốt lõi của ROS2. Lý do tại sao mọi thứ lại hoạt động theo một cách nhất định.
Arjan Bakema
Khóa học - Autonomous Navigation & SLAM with ROS 2
Dịch thuật bằng máy
kiến thức và việc sử dụng AI cho Robot trong Tương lai.
Ryle - PHILIPPINE MILITARY ACADEMY
Khóa học - Artificial Intelligence (AI) for Robotics
Dịch thuật bằng máy