Trang chủĐời sống công nghệThuật toán Q-learning giúp robot thực hiện những cú sút bóng chính...

Thuật toán Q-learning giúp robot thực hiện những cú sút bóng chính xác

RoboCup, tên ban đầu là J-League, là cuộc thi về robot và trí tuệ nhân tạo (AI) hàng năm do Liên đoàn RoboCup Quốc tế tổ chức. Trong RoboCup, các robot sẽ thi đấu bóng đá với nhau.

Ý tưởng cho cuộc thi bắt nguồn từ năm 1992, khi Giáo sư Alan Mackworth tại Đại học British Columbia ở Canada viết một bài báo có tựa đề “On Seeing Robots.” Năm 1993, một nhóm nghiên cứu ở Nhật Bản đã lấy cảm hứng từ bài báo này để tổ chức giải đấu bóng đá đầu tiên dành cho robot.

• Robot mô phỏng người hoàn thiện
• Robot đảm bảo an ninh trong trường học

Mặc dù RoboCup có thể mang đến những trận đầu có tính giải trí cao, nhưng mục tiêu chính của nó là giới thiệu những tiến bộ trong lĩnh vực robot và AI trong bối cảnh thế giới thực. Các hệ thống robot tham gia giải đấu là kết quả của nỗ lực nghiên cứu chuyên sâu của nhiều nhà khoa học trên toàn thế giới.

Ngoài cuộc thi trong thế giới thực, các nhà khoa học máy tính và nhà chế tạo robot có thể thử nghiệm các công cụ tính toán của họ cho môn “bóng đá robot” tại giải đấu mô phỏng RoboCup 3D. Đây thực chất là một nền tảng tái hiện lại RoboCup trong mô phỏng, đóng vai trò như một phòng tập ảo cho các kỹ thuật AI và hệ thống robot được thiết kế và rèn luyện chơi bóng.

Các nhà nghiên cứu tại Viện Công nghệ Yên Đài ở Trung Quốc và Đại học Rahjuyan Danesh Borazjan ở Iran mới đây đã phát triển một kỹ thuật mới có thể nâng cao khả năng sút bóng của robot khi đang di chuyển. Kỹ thuật này đã được trình bày trong một bài báo đăng trên Tạp chí Máy tính Nhân bản và Trí tuệ Môi trường của Springer Link, dựa trên phương pháp tính toán được gọi là thuật toán Q-learning.

“Một trong những mục tiêu quan trọng nhất của các đội tham gia giải đấu RoboCup3D là khả năng tăng số lượng và chất lượng các cú sút bóng của robot”, Yun Lin, Yibin Song và Amin Rezaeipanah, ba nhà nghiên cứu đã phát triển kỹ thuật này, viết trong bài báo của họ. “Lý do cho tầm quan trọng này là để ghi bàn và đánh bại đối thủ, các robot phải thực hiện những cú sút mạnh mẽ và chính xác.”

Hầu hết các kỹ thuật tạo ảnh trong mô phỏng đều dựa trên hai cách tiếp cận là: chuyển động học nghịch đảo (IK) và phân tích điểm. Đây là các phương pháp toán học có thể được sử dụng để tạo hoạt ảnh máy tính và robot để dự đoán các thông số khớp cần thiết để robot có thể hoàn thành một hành động nhất định.

Các nhà nghiên cứu cho rằng: Những phương pháp trước đây chỉ cho phép robot thực hiện cú sút chính xác khi chúng và quả bóng ở trong vị trí cố định. Tuy nhiên, điều này không phải lúc nào cũng có thể xảy ra trong một trận bóng đá.

Để khắc phục những hạn chế của các phương pháp trước đây, Lin và các đồng nghiệp của mình đã tạo ra một cách thức mới dựa trên thuật toán Q-learning, có thể nâng cao khả năng sút bóng của robot khi đang di chuyển. Các thuật toán Q-learning là cách tiếp cận tính toán không có mô hình dựa trên lĩnh vực học tăng cường. Các thuật toán này đặc biệt hữu ích trong các trường hợp mà các tác nhân đang cố gắng học các điều hướng môi trường một cách tối ưu hoặc thực hiện những hành động phức tạp.

Sau giai đoạn thử nghiệm, Lin, Song và Rezaeipanah đã đánh giá thuật toán Q-learning giúp các robot của họ trong khi di chuyển có thể thực hiện những cú sút bóng tốt hơn nhiều so với các đối thủ khác tham gia giải đấu RoboCupSoccer và giải đấu RoboCup3D. Việc này đã cải thiện đáng kể hiệu suất thi đấu robot của họ trong các trận bóng đá.

Bình An (theo TechXplore)

Theo dõi fanpage chúng tôi

BÌNH LUẬN

Vui lòng nhập bình luận của bạn
Vui lòng nhập tên của bạn ở đây

Bài viết cùng chủ đề

EuroCham Việt Nam giới thiệu tân Chủ tịch năm 2024

Ngày 27/3/2024, Hiệp hội doanh nghiệp Châu Âu tại Việt Nam (EuroCham Việt Nam) đã công bố Hội đồng quản trị năm 2024, bổ nhiệm ông Dominik Meichle - Giám đốc điều hành của Bosch Việt Nam làm Tân Chủ tịch.

Hà Nội chốt 3 môn thi vào lớp 10

Năm học 2024 - 2025, kỳ thi vào lớp 10 THPT công lập của Hà Nội gồm ba môn Ngữ văn, Toán, Ngoại ngữ, không có môn thứ tư.

Tuyên dương và trao bảo trợ tài năng trẻ TP. Hồ Chí Minh năm 2023

Trong suốt 31 năm qua Quỹ Bảo trợ Tài năng trẻ TP. Hồ Chí Minh đã góp phần phát hiện, tập hợp, bồi dưỡng và phát huy tài năng trẻ đóng góp cho thành phố và đất nước, với hàng trăm tài năng trẻ đã được tuyên duyên và bảo trợ.

Tháng 2 năm 2024 chứng kiến nhiều vụ tấn công ransomware nhất trong 3 năm

Tháng 2 năm 2024 được xem là thời điểm ghi nhận nhiều cuộc tấn công ransomware nhất trong 3 năm trở lại đây, với tổng số 416 trường hợp tấn công trên toàn cầu, tăng 73% so với cùng kỳ năm 2023 và 124% so với năm 2022.

Lợi nhuận ròng điều chỉnh năm 2023 của Xiaomi tăng vọt 126,3%, đạt 2,67 tỷ USD

Xiaomi vừa công bố kết quả kiểm toán cho năm tài chính kết thúc vào ngày 31/12/2023. Trong năm 2023, tổng doanh thu của tập đoàn là 37,52 tỷ USD, lợi nhuận ròng điều chỉnh tăng 126,3%, đạt 2,67 tỷ USD.

Bài viết nổi bật

VAA tham gia Triển lãm Khuôn mẫu và công cụ Đông Quản – Trung Quốc

Đoàn doanh nghiệp Việt Nam thuộc các lĩnh vực cơ khí, điện tử, hàn, tự động hóa gồm 21 thành viên đến từ các Hội, Hiêp hội như: Hội Tự động hóa Việt Nam, Doanh nghiệp cơ khí Việt Nam (VAMI), Hội Khoa học kỹ thuật Hàn Việt Nam đã tham gia “Lễ hội mua sắm” máy công cụ, các trang thiết bị, linh kiện tại khu vực Greater Bay của triển lãm.

Hợp tác doanh nghiệp Việt – Đức thúc đẩy phát triển xanh TP. Hồ Chí Minh

Diễn đàn Tăng trưởng xanh Việt Nam - Đức với chủ đề “Hợp tác vì phát triển xanh Thành phố Hồ Chí Minh” là cơ hội để các Sở, ngành, lãnh đạo Thành phố lắng nghe những chia sẻ, bài học kinh nghiệm trong phát triển kinh tế xanh của Đức

Circuit Design: từ thiết kế bảng mạch đến nhà cung cấp công nghệ không dây hàng đầu Nhật Bản

Circuit Design một thương hiệu công nghệ không dây hàng đầu của Nhật Bản phục vụ cho nhiều ngành công nghiệp và dân dụng khác nhau. Với 50 năm xây dựng, hiện sản phẩm của họ đã có mặt ở hơn 30 quốc gia trên thế giới. Đằng sau thành công đó là câu chuyện khởi nghiệp đầy cảm hứng.