Trang chủ / works / Nghiên cứu và phát triển R&D / Đào tạo huấn luyện điều khiển cánh tay Robot bằng công nghệ VR
Đào tạo huấn luyện điều khiển cánh tay Robot bằng công nghệ VR
| Lĩnh vực ứng dụng | Chế tạo, sản xuất, điều khiển |
|---|---|
| Công nghệ | Unity, Oculus SDK, CCD IK |
| Thiết bị | Meta/Oculus Quest |
| Thời gian hoàn thành | Tháng 7 năm 2021 |
| Quy mô | 4 man-month |
Đào tạo huấn luyện điều khiển cánh tay Robot
Ứng dụng này được xây dựng cho một nhà máy tại khu công nghệ cao TP.HCM. Với mục đích đào tạo học viên làm quen với modul cánh tay Robot trước khi thao tác thực tế với thiết bị thật trong nhà máy. Giúp tăng tốc độ huấn luyện và giảm thiểu rủi ro, hỏng hóc khi làm việc với thiết bị thực.
Ứng dụng chạy trên thiết bị VR (Oculus Quest) với chức năng chính:
Điều khiển: Cho phép người dùng tự do điều khiển cánh tay Robot bao gồm khả năng tương tác với các đồ vật trong phòng (cầm, nắm, nhả…)
Hướng dẫn: Hướng dẫn người dùng theo quy trình được định trước. Nhằm đo thời gian, chấm điểm thao tác…
Vấn đề và yêu cầu của khách hàng
Tốn chi phí để tạo môi trường huấn luyện, mua sắm thiết bị.
Thiết bị thực hành ít và lạc hậu do chi phí đầu tư cao.
Thời thực hành thực tế ít học viên khó tiếp thu bài học.
Rủi ro khi xảy ra sự cố, tai nạn trong huấn luyện thực tế.
Giải pháp đề xuất
- Dùng công nghệ 3D tái hiện thực tế tình huống huấn luyện.
- Ứng dụng VR để học viên trải nghiệm trong môi trường ảo an toàn theo hình thức nhập vai bám sát thực tế nhất.
- Một thiết bị VR (Oculus Quest) có thể thay thế cho hàng trăm thiết bị, dây chuyền máy móc vận hành phức tạp, tốn kém.
Lợi ích / hiệu quả
- Cho phép người dùng điều khiển tương tác với cánh tay Robot với các nút bấm và chức năng mô phỏng giống như thật.
- Môi trường an toàn, không rủi ro.
- Nhiều kịch bản, tình huống phát sinh khó gặp trong thực tế.
- Giảm chi phí và tăng tốc độ đào tạo.
- Tạo hứng thú học tập: ấn tượng, ghi nhớ, hiểu sâu hơn đào tạo truyền thống.
- Có thể dễ dàng mô phỏng ra nhiều thiết bị khác nhau, cũng như tạo ra nhiều kịch bản hoạt động một cách dễ dàng.
Nghiên cứu phát triển ứng dụng tập thể dục VR trên xe đạp kết hợp với hình ảnh/video trực tiếp. Kinect nhận diện bàn đạp của xe đạp tập và khuôn mặt. Liên kết tốc độ quay của bàn đạp và tốc độ phát lại trên video.
Chúng tôi đã phát triển một hệ thống hỗ trợ công việc từ xa có chuyển tiếp trực tiếp bằng camera hành động trong khi nói chuyện trên trang web bằng điện thoại thông minh.
OneTech bắt đầu thực hiện nhiều nhiệm vụ khác nhau để tìm hiểu và phát triển các ứng dụng cho Robot Pepper của Softbank. Dưới đây là công trình nghiên cứu và phát triển một ứng dụng trò chuyện nhận dạng giọng nói thông qua AI.
Dự án "Nghiên cứu ứng dụng bàn phím đeo trên tay TapStrap 2 trong không gian văn phòng ảo VR" là một ví dụ điển hình cho việc áp dụng công nghệ để giải quyết vấn đề khó khăn trong việc nhập liệu trong không gian văn phòng ảo VR.
Hệ thống hỗ trợ từ xa kết nối từ máy tính hoặc thiết bị cá nhân (smartphone, tablet) tới HoloLens. Các chuyên gia kinh nghiệm có thể quan sát và hướng dẫn kỹ thuật viên hoặc người dùng thao tác và xử lý các tình huống thực tế một cách nhanh chóng và chính xác nhất.