Nghiên cứu phương pháp học tăng cường ứng dụng cho bài toán định vị robot di động làm việc trong môi trường không xác định

Với mục đích đào tạo cho robot khả năng tự học tự thích nghi với môi trường làm việc không xác định, đề tài Nghiên cứu phương pháp học tăng cường ứng dụng cho bài toán định vị robot di động làm việc trong môi trường không xác định của  nhóm sinh viên Khoa Cơ khí đã được Hội đồng nghiệm thu đánh giá cao, đạt Giải Nhất cuộc thi sinh viên Nghiên cứu khoa học lần thứ XIII.

Nguyễn Hồng Sơn và Phan Thái Học chụp ảnh cùng giảng viên hướng dẫn TS.Nguyễn Anh Tú và các bạn học tại Khoa Cơ khí

Chia sẻ về lí do chọn đề tài, bạn Nguyễn Hồng Sơn - trưởng nhóm cho biết: rất may mắn khi em là một trong những thành viên của HaIBot Lab do TS. Nguyễn Anh Tú hướng dẫn, em đã được sớm tiếp cận với robot di động và các thiết bị chất lượng cao cùng với các hướng nghiên cứu. Nhận thấy vai trò và tầm quan trọng của trí tuệ nhân tạo trong sự phát triển xã hội hiện nay, cùng với vấn đề về nghiên cứu các giải thuật thông minh đối với robot di động được giới khoa học ngày càng quan tâm, nhóm chúng em đã được thầy hướng dẫn thông qua và lên ý tưởng thực hiện đề tài.
Từ các nội dung nghiên cứu đề xuất, nhóm xác định phương pháp nghiên cứu chính là kết hợp giữa nghiên cứu lý thuyết và nghiên cứu thực nghiệm. Trong đó nghiên cứu lý thuyết cơ sở của bài toán định vị cho robot di động và phương pháp học tăng cường từ đó đề xuất giải pháp cho thực hiện đề tài. Nghiên cứu thực nghiệm nhằm đánh giá độ chính xác, tin cậy và sự ổn định của các thuật toán cũng như giải pháp về thiết bị phần cứng của đề tài
Sau thi thực hiện quá trình huấn luyện robot ở chương trình mô phỏng, nhóm nghiên cứu dùng tập giá trị đào tạo được sử dụng cho quá trình tránh vật cản của robot ở môi trường thực.

Điểm gốc khi robot bắt đầu khời động và lựa chọn điểm goal bất kì

Điểm gốc là vị trí robot khi khởi động

Đặt goal là 1 điểm bất kì người điều khiển có để đặt ở môi trường chưa biết trước. Điểm goal được thể hiện bằng mũi tên màu tím trong hình. Điểm đến là gốc của mũi tên, hướng của robot trùng với hướng của mũi tên. Robot thực hiện quá trình di chuyển đến điểm đặt đồng thời phát hiện và tránh những chướng ngại vật trên đường đi.

Quá trình tránh vật cản của robot khi di chuyển

Kết quả hiển thị trên màn hình khi robot đã đi đến được điểm đích

Vị trí robot ở điểm đích khi robot kết thúc quá trình

Ở trường hợp này, sau khi thực hiện quá trình di chuyển đến điểm goal, hệ thống đã tính toán ra vị trí của điểm goal với tên hiển thị là “GOAL REACHED”

Nhóm tiến hành đánh giá thử nghiệm

Đánh giá thực nghiệm cho thấy: Hệ thống đã hoạt động ổn định, cho thời gian đáp ứng đến vị trí điểm đặt nhanh; Thực hiện được yêu cầu phát hiện và tránh các vật cản trên đường di chuyển với môi trường không xác định, robot chưa biết vị trí vật cản và không gian cũng như biên dạng của môi trường làm việc; Các sai lệch khi xác định toạ độ điểm goal chủ yếu là góc quay θ của robot; So sánh với phương pháp định vị robot truyền thống khác, phương pháp đề xuất có độ ổn định cao, thời gian đáp ứng nhanh và tích hợp thêm được tác vụ tránh vật cản khi di chuyển, robot không bị ảnh hưởng bởi các biên dạng vật cản khác nhau.

Đề tài được Hội đồng đánh giá cao, với 92,4 điểm đã xuất sắc giành Giải Nhất cuộc thi sinh viên nghiên cứu khoa học lần thứ XIII.

Video kết quả của đề tài: