acecook

Thuật toán Q-learning giúp robot thực hiện những cú sút bóng chính xác

Đời sống công nghệ
07/12/2021 09:08
Các nhà nghiên cứu tại Viện Công nghệ Yên Đài ở Trung Quốc và Đại học Rahjuyan Danesh Borazjan ở Iran mới đây đã phát triển một kỹ thuật mới có thể nâng cao khả năng sút bóng của robot khi đang di chuyển. Việc này đã cải thiện đáng kể hiệu suất thi đấu robot của họ trong các trận bóng đá.
aa

RoboCup, tên ban đầu là J-League, là cuộc thi về robot và trí tuệ nhân tạo (AI) hàng năm do Liên đoàn RoboCup Quốc tế tổ chức. Trong RoboCup, các robot sẽ thi đấu bóng đá với nhau.

Ý tưởng cho cuộc thi bắt nguồn từ năm 1992, khi Giáo sư Alan Mackworth tại Đại học British Columbia ở Canada viết một bài báo có tựa đề “On Seeing Robots.” Năm 1993, một nhóm nghiên cứu ở Nhật Bản đã lấy cảm hứng từ bài báo này để tổ chức giải đấu bóng đá đầu tiên dành cho robot.

• Robot mô phỏng người hoàn thiện
• Robot đảm bảo an ninh trong trường học

thuat toan q learning giup robot thuc hien nhung cu sut bong chinh xac

Mặc dù RoboCup có thể mang đến những trận đầu có tính giải trí cao, nhưng mục tiêu chính của nó là giới thiệu những tiến bộ trong lĩnh vực robot và AI trong bối cảnh thế giới thực. Các hệ thống robot tham gia giải đấu là kết quả của nỗ lực nghiên cứu chuyên sâu của nhiều nhà khoa học trên toàn thế giới.

Ngoài cuộc thi trong thế giới thực, các nhà khoa học máy tính và nhà chế tạo robot có thể thử nghiệm các công cụ tính toán của họ cho môn “bóng đá robot” tại giải đấu mô phỏng RoboCup 3D. Đây thực chất là một nền tảng tái hiện lại RoboCup trong mô phỏng, đóng vai trò như một phòng tập ảo cho các kỹ thuật AI và hệ thống robot được thiết kế và rèn luyện chơi bóng.

Các nhà nghiên cứu tại Viện Công nghệ Yên Đài ở Trung Quốc và Đại học Rahjuyan Danesh Borazjan ở Iran mới đây đã phát triển một kỹ thuật mới có thể nâng cao khả năng sút bóng của robot khi đang di chuyển. Kỹ thuật này đã được trình bày trong một bài báo đăng trên Tạp chí Máy tính Nhân bản và Trí tuệ Môi trường của Springer Link, dựa trên phương pháp tính toán được gọi là thuật toán Q-learning.

“Một trong những mục tiêu quan trọng nhất của các đội tham gia giải đấu RoboCup3D là khả năng tăng số lượng và chất lượng các cú sút bóng của robot”, Yun Lin, Yibin Song và Amin Rezaeipanah, ba nhà nghiên cứu đã phát triển kỹ thuật này, viết trong bài báo của họ. “Lý do cho tầm quan trọng này là để ghi bàn và đánh bại đối thủ, các robot phải thực hiện những cú sút mạnh mẽ và chính xác.”

Hầu hết các kỹ thuật tạo ảnh trong mô phỏng đều dựa trên hai cách tiếp cận là: chuyển động học nghịch đảo (IK) và phân tích điểm. Đây là các phương pháp toán học có thể được sử dụng để tạo hoạt ảnh máy tính và robot để dự đoán các thông số khớp cần thiết để robot có thể hoàn thành một hành động nhất định.

Các nhà nghiên cứu cho rằng: Những phương pháp trước đây chỉ cho phép robot thực hiện cú sút chính xác khi chúng và quả bóng ở trong vị trí cố định. Tuy nhiên, điều này không phải lúc nào cũng có thể xảy ra trong một trận bóng đá.

Để khắc phục những hạn chế của các phương pháp trước đây, Lin và các đồng nghiệp của mình đã tạo ra một cách thức mới dựa trên thuật toán Q-learning, có thể nâng cao khả năng sút bóng của robot khi đang di chuyển. Các thuật toán Q-learning là cách tiếp cận tính toán không có mô hình dựa trên lĩnh vực học tăng cường. Các thuật toán này đặc biệt hữu ích trong các trường hợp mà các tác nhân đang cố gắng học các điều hướng môi trường một cách tối ưu hoặc thực hiện những hành động phức tạp.

Sau giai đoạn thử nghiệm, Lin, Song và Rezaeipanah đã đánh giá thuật toán Q-learning giúp các robot của họ trong khi di chuyển có thể thực hiện những cú sút bóng tốt hơn nhiều so với các đối thủ khác tham gia giải đấu RoboCupSoccer và giải đấu RoboCup3D. Việc này đã cải thiện đáng kể hiệu suất thi đấu robot của họ trong các trận bóng đá.

Bình An (theo TechXplore)

mca
Tin bài khác
Báo điện tử Dân trí sẵn sàng cho một giai đoạn phát triển mới

Báo điện tử Dân trí sẵn sàng cho một giai đoạn phát triển mới

Chiều 15/7, báo Dân trí long trọng tổ chức Lễ kỷ niệm 20 năm ngày thành lập Báo điện tử Dân trí.
Tiết kiệm năng lượng là “nền móng” cho Net Zero 2050

Tiết kiệm năng lượng là “nền móng” cho Net Zero 2050

Không chỉ là lời hứa tại COP26, hành trình trung hòa carbon vào năm 2050 của Việt Nam đang định hình rõ rệt bằng những chính sách chiến lược, chương trình hành động cụ thể và sự đồng thuận sâu rộng trong xã hội. Từ mục tiêu Net Zero, đến chương trình VNEEP và chính sách tiết kiệm năng lượng, mỗi bước tiến đang mở ra cánh cửa dẫn tới một tương lai xanh, bền vững và đầy nhân văn.
Nhận định phiên giao dịch ngày 16/7: Canh nhịp chỉnh để cơ cấu?

Nhận định phiên giao dịch ngày 16/7: Canh nhịp chỉnh để cơ cấu?

VN Index đang cho thấy dấu hiệu "quá đà" khi vượt quá xa dải Bollinger và đường MA20. Biểu đồ tâm lý cũng đã tiến vào vùng “hưng phấn – bất chấp”, một vùng thường đi kèm với rủi ro điều chỉnh kỹ thuật. Trong bối cảnh đó, chiến lược giao dịch khôn ngoan là hạ tỷ trọng margin, canh chốt lời và cơ cấu lại danh mục một cách chọn lọc.
TS. Đinh Vũ Trang Ngân làm Hiệu trưởng Trường đại học Fulbright Việt Nam

TS. Đinh Vũ Trang Ngân làm Hiệu trưởng Trường đại học Fulbright Việt Nam

TS. Đinh Vũ Trang Ngân là nhà kinh tế học và là một trong những thành viên đầu tiên của Trường đại học Fulbright Việt Nam từ những ngày đầu thành lập năm 2016.
Tử vi vòng quay công nghệ ngày 16/7/2025: Tuổi Dần chịu nhiều áp lực, Tuổi Tuất cần cẩn trọng hơn

Tử vi vòng quay công nghệ ngày 16/7/2025: Tuổi Dần chịu nhiều áp lực, Tuổi Tuất cần cẩn trọng hơn

Những bí ẩn của khoa học đời sống là "món ăn" tinh thần không thể thiếu trong cuộc sống của con người. Tử vi vòng quay công nghệ xem tử vi 12 con giáp ngày 16/7/2025 cho tất cả các tuổi nhằm dự đoán vận hạn về công danh, tiền bạc, tình duyên, sức khỏe...
Thị trường chứng khoán ngày 15/7: Áp lực bán dâng cao, nhóm chứng khoán ngược dòng tăng mạnh

Thị trường chứng khoán ngày 15/7: Áp lực bán dâng cao, nhóm chứng khoán ngược dòng tăng mạnh

Thị trường ghi nhận sự phân hóa rõ rệt trong phiên 15/7. Trong khi các nhóm trụ như ngân hàng và bất động sản đồng loạt suy yếu, nhóm chứng khoán lại nổi bật với đà tăng mạnh mẽ. Diễn biến này cho thấy thị trường đang bước vào giai đoạn điều chỉnh kỹ thuật sau thời gian hưng phấn.
Bộ GDĐT chính thức công bố phổ điểm thi tốt nghiệp THPT 2025

Bộ GDĐT chính thức công bố phổ điểm thi tốt nghiệp THPT 2025

Chiều 15/7, Bộ GDĐT công bố phổ điểm thi tốt nghiệp THPT 2025. Đây là lần đầu tiên phổ điểm được công bố trước khi thí sinh biết điểm thi.
Trường Đại học Khoa học Sức khỏe, ĐHQGHCM tuyển dụng nhân sự

Trường Đại học Khoa học Sức khỏe, ĐHQGHCM tuyển dụng nhân sự

Trường Đại học Khoa học Sức khỏe, Đại học Quốc gia Thành phố Hồ Chí Minh thông báo tuyển dụng nhân sự .
Bộ Khoa học và Công nghệ đề xuất thêm 4 dự án luật trọng điểm

Bộ Khoa học và Công nghệ đề xuất thêm 4 dự án luật trọng điểm

6 tháng cuối năm 2025, Bộ Khoa học và Công nghệ sẽ trình Chính phủ xây dựng và sửa đổi các dự án luật: Luật Chuyển đổi số, Luật Sở hữu trí tuệ (sửa đổi), Luật Công nghệ cao, Luật Chuyển giao công nghệ,...
Loạt "ông lớn" ngân hàng hé lộ kết quả kinh doanh 6 tháng đầu năm, tín dụng tăng tốc

Loạt "ông lớn" ngân hàng hé lộ kết quả kinh doanh 6 tháng đầu năm, tín dụng tăng tốc

Tính đến hiện tại, ba ngân hàng khối quốc doanh và loạt ngân hàng lớn khác đã tiết lộ kết quả kinh doanh 6 tháng đầu năm 2025, cho thấy tín hiệu phục hồi tích cực, đặc biệt là tăng trưởng tín dụng.