T2Mem: Ky thuat huan luyen robot ghi nhac lai cac canh trong qua khu de thuc hien nhiem vu

Bối cảnh

Nhieu tac vu cua robot khong the chi duoc danh gia dua tren khung canh dang nhin thay va doi hoi phai ghi nho thong tin da thay truoc do. Tuy nhien, viec chi don thuan luu tru tat ca cac ban ghi trong qua khu la khong du, va ban tom tat giai thich rang thong tin huu ich cho cac hanh dong trong tuong lai phai duoc ghi nho co chon loc.

Phương pháp

T2Mem hoat dong trong cac chinh sach thi giac-ngon ngu-hanh dong da duoc huan luyen truoc va hoc ma khong can cac mo hinh suy luan ngoai rieng biet hoac cac chu thich chuyen biet ve bo nho. Thong qua huan luyen tai thoi diem kiem tra, lich su quan sat duoc nen va luu tru vao cac trong so nhanh nho duoc cap nhat theo cach tu giam sat truc tuyen, tranh viec phai xu ly lai toan bo lich su moi lan. No luan phi giua viec hinh thanh bo nho va hoc hanh dong de moi thanh phan co mot doi tac co dinh trong qua trinh toi uu hoa.

Kết quả chính

Ty le thanh cong trung binh tren 16 tac vu RoboMME da cai thien tu 17.93% len 56.83%. Ngoai ra, cac phep do co kiem soat bao cao rang qua trinh suy luan nhanh hon it nhat 3 lan so voi cac phuong phap bo nho ro rang hien co.

Hạn chế & điểm cần xác minh

Chi dua vao ban tom tat, nguoi ta khong the xac minh ket qua thuc nghiem robot thuc te, chi phi tinh toan cho viec huan luyen, va muc do tong quat hoa sang cac loai tac vu khac. Cac dieu kien do luong cho su cai thien toc do va chi tiet ve cac muc tieu so sanh cung khong duoc cung cấp trong ban tom tat.

Giải thích thuật ngữ

• Chinh sach Thi giac-Ngon ngu-Hanh dong (VLA) — Mot mo hinh tri tue nhan tao quan sat man hinh, hieu cac lenh bang ngon ngu tu nhien va truc tiep quyet dinh cac hanh dong cua robot.
• Huan luyen tai thoi diem kiem tra — Mot phuong phap hoc trong do mo hinh tu cap nhat chinh no mot chut dua tren cac dau vao ngay ca tai thoi diem su dung thuc te.
• Trong so nhanh — Cac gia tri luu tru tam thoi trong mo hinh thay doi nhanh chong trong mot thoi gian ngan de giu thong tin gan day.
• Hoc tu giam sat — Mot phuong phap trong do cac mo hinh tu hoc bang cach che khuat hoac du doan cac phan cua du lieu ma khong can cau tra loi dung do con nguoi cung cap.
• RoboMME — Mot chuan danh gia (tap hop cac tac vu kiem tra chuan hoa) duoc tao ra de danh gia kha nang cua robot trong viec ghi nho va su dung thong tin trong qua khu.
• Bo nho hoi quy — Mot cau truc mang no ron duy tri thong tin trong qua khu bang cach truyen trang thai cua buoc truoc sang buoc tiep theo.