Robot uči novi zadatak iz jednog primera i prilagođava ga drugom predmetu
Novi istraživački rad predstavlja POIL, sistem koji pokušava da prenese robotsku manipulaciju iz samo jedne demonstracije koristeći skup 3D tačaka na funkcionalnom delu predmeta.
Jedna demonstracija kao osnova
POIL koristi skup 3D tačaka na funkcionalnom delu objekta kao zajedničku reprezentaciju za prenos putanje i izvršavanje u zatvorenoj petlji. Prenos iz jedne demonstracije omogućavaju korespondencije između tačaka, bez zahteva za poznatim 3D modelom objekta ili posebnim estimatorom poze.
Sistem koristi multimodalni veliki jezički model da odredi zajednički funkcionalni deo predmeta i prenese putanju kroz promene ugla gledanja, položaja i kategorije objekta. Tokom izvršavanja, više kamera prati iste tačke, a kontroler ih koristi za korekciju kretanja robota u realnom vremenu.
Šta su autori testirali
Autori navode eksperimente u simulaciji i na stvarnom robotu u kojima je sistem prenosio jednu demonstraciju između različitih kategorija objekata, položaja hvata i geometrije cilja, uz oporavak od spoljašnjih poremećaja tokom izvršavanja.
Zašto je važno
Cilj pristupa je da robot ne mora da dobije veliki broj demonstracija niti poznat 3D model za svaki novi predmet pre nego što pokuša sličan zadatak.
U objavljenim eksperimentima sistem je pokazao prenos između različitih objekata i oporavak od spoljašnjih poremećaja tokom rada.
Izvori
Prikazani su izvorni linkovi korišćeni za proveru objavljenih činjenica.
Komentari
Komentari se objavljuju nakon moderacije.
Još nema objavljenih komentara.