HEAPGrasp: Robotika koja vidi kroz staklo i sjaj

Roboti koji hvataju automobile dijelove ili tanjure s restoranske trake već godinama postoje, ali sve dok je objekt bio proziran ili reflektivan, automatizacija je nailazila na zid. HEAPGrasp, metoda koju su razvili Shogo Arai i Ginga Kennis s Tokijskog sveučilišta znanosti, rješava taj problem kombinacijom višestrukih RGB snimki i rekonstrukcije 3D oblika iz silueta.

Umjesto da se oslanja na dubinske senzore koji se zbunjuju na staklu ili sjajnom metalu, sustav koristi semantičku segmentaciju (DeepLabv3+ s ResNet-50) da izvuče obrise objekta iz više kutova. Rezultat je 3D rekonstrukcija koja ne ovisi o optičkim svojstvima materijala.

To znači da robot može pouzdano uhvatiti staklenu čašu, metalni dio ili prozirnu plastičnu ladicu bez ljudske intervencije. Istraživači ističu da je ključni napredak upravo u eliminaciji „slijepih točaka“ koje su do sada zaustavljale automatizaciju u proizvodnji, logistici i prehrambenoj industriji.

No, kao i kod svih robotskih inovacija, demo u kontroliranim uvjetima nije isto što i deployment u stvarnom svijetu. HEAPGrasp je trenutno dokazan na ograničenom skupu objekata u laboratorijskim uvjetima, a pitanje je kako će se nositi s nepredvidivim rasporedom, prljavštinom ili promjenjivim svjetlosnim uvjetima u stvarnim skladištima ili restoranima.

Part 2: Pravi test za HEAPGrasp nije hoće li uhvatiti staklenu čašu na pozornici, već hoće li preživjeti smjenu u skladištu gdje se paketi gomilaju, svjetlo treperi, a objekti dolaze u svim oblicima i veličinama. Trenutni prototip ovisi o višestrukim kamerama i računalnoj snazi za obradu silueta u realnom vremenu, što postavlja pitanje energetske učinkovitosti i troškova skaliranja.

Iako je studija objavljena u uglednom časopisu IEEE Robotics and Automation Letters i predstavljena na ICRA 2026, još nema podataka o stvarnim industrijskim pilotima. Tvrtke koje se bave automatizacijom, poput KUKA-e ili Fanuc-a, obično testiraju nove metode mjesecima prije nego što ih integriraju u komercijalne sustave.

HEAPGrasp bi mogao biti korak naprijed, ali samo ako se dokaže da je robusniji od postojećih rješenja koja se oslanjaju na laserske senzore ili dodatne oznake na objektima. Za sada, HEAPGrasp ostaje obećavajući istraživački projekt.

Njegova prava vrijednost neće biti u tome što može, već u tome što će preživjeti izvan laboratorija. Jer u robotici, demo je uvijek lakši dio.

Konačni cilj je stvoriti sustav koji će moći raditi u različitim uvjetima bez ljudske intervencije. To će zahtijevati daljnja istraživanja i testiranja. HEAPGrasp je samo početak tog puta. Njegova budućnost ovisi o tome kako će se nositi u stvarnom svijetu.