Robot dostal fotky místností vyfocené na iPhonu. Potom v místnosti prováděl úkoly
Tým robotiků z New York University ve spolupráci s kolegou z oddělení AI ze společnosti Meta vyvinul robota, který je schopen vyzvednout určené předměty v neznámé místnosti a umístit je na nové určené místo. Výzkumníci poznamenali, že vizuální jazykové modely (VLM) za posledních několik let velmi pokročily a staly se velmi dobrými v rozpoznávání objektů na základě jazykových výzev.
Do dnešní doby se zlepšily i dovednosti robotů – dokážou uchopit věci, aniž by je zlomili, přenést je na požadovaná místa a položit je. Dosud se však pro kombinování VLM s kvalifikovanými roboty udělalo jen málo. Pro se výzkumníci pokusili udělat právě toto s robotem prodávaným společností Hello Robot. Má kola, tyč a výsuvná ramena s úchopovými sponami místo rukou. Výzkumný tým rbotovi dal dříve vyškolený VLM.
Poté robota přenesli do 10 domovů důchodců, kde pomocí iPhonu vytvořili 3D videa a předali je robotovi, aby získal celkový dojem z uspořádání daného domu. Poté robota požádali, aby provedl několik jednoduchých pohybových úkolů – například „přesuň růžovou láhev na polici do odpadkového koše,“ uvádí Techxplore.
Celkem požádali robota, aby provedl 170 takových úkolů – dokázal je úspěšně provést v 58 % případů. Výzkumníci zjistili, že by mohli zlepšit jeho úspěšnost až na 82% tím, že uklidí pracovní prostor.
Výzkumný tým poukazuje na to, že jejich systém používá algoritmus zero-shot, což znamená, že robot nebyl trénován v prostředí, ve kterém pracoval. Také naznačují, že úspěšnost, které dosáhli, dokazuje, že robotické systémy založené na VLM jsou životaschopné.
zdroj: Techxplore
Nejnovější články
- Jeden nespokojený senior může zablokovat stavbu celého satelitního městečka o několika domech
- Kalifornie testuje autobusy s rychlostí 225 km/h. Pro svou zběsilou jízdu budou mít vlastní pruh na dálnici
- Některé České restaurace trestají nedojedená jídla poplatkem. Kdo nedojí, připlatí si
- Cyklistický airbag může být rozhodujícím prvkem pro záchranu života. Objevují se hlasy pro jeho povinné zavedení
- Ukrajina tak dlouho žádala USA o zbraně dlouhého doletu, až se je naučila vyrábět sama
- Psychologie říká, že lidé, kteří dosáhnou 70 let a uvědomí si, že je jejich děti již nepotřebují, mohou pociťovat hluboký dopad na své duševní zdraví
- Zpráva evropských úřadů potvrzuje: hrozny, jahody a pomeranče jsou ovoce nejvíce kontaminovány pesticidy
- Kbelík a mop mají své dny sečteny: odborníci na úklid sdílejí stejný názor a v roce 2026 se přiklánějí k jeho vylepšené verzi
- Blíží se úplné zatmění slunce: Dočkáme se ho v létě a bude to nádherná podívaná
- Je konec: Legendární švédská automobilka po 75 letech končí prodejem posledních vyrobených aut