Linia montażowa, która sama uczy się składać nowy produkt z instrukcji tekstowej

Wprowadzenie nowego wariantu produktu na linię montażową w fabryce elektroniki czy motoryzacji to zwykle dwa do czterech tygodni przestoju. Inżynierowie ręcznie programują trajektorie robotów, testują je, poprawiają i testują od nowa. Technologia Prompt-Driven Exploration pokazuje, że robot może nauczyć się montażu sam, startując od zera i korzystając tylko z opisu słownego.

Problem: przezbrajanie linii to tygodnie przestoju

W typowej fabryce kontraktowej elektroniki przezbrojenie linii SMT i montażu końcowego pod nowy produkt zajmuje od 10 do 20 dni roboczych. Najwięcej czasu pochłania programowanie robotów odpowiedzialnych za operacje niestandardowe: włożenie złącza w ciasne gniazdo, przykręcenie radiatora, zatrzaśnięcie obudowy. Każdy ruch trzeba zapisać jako sekwencję współrzędnych i warunków, a potem testować na fizycznym stanowisku. Godzina przestoju linii montażowej elektroniki to koszt rzędu 2-4 tysięcy złotych. Przy 10 nowych produktach rocznie mówimy o milionach złotych straconych na samo przezbrajanie.

Jak robot uczy się z instrukcji tekstowej

Prompt-Driven Exploration (PDE) to metoda z pogranicza uczenia ze wzmocnieniem i dużych modeli językowych. Robot wyposażony w model typu VLA (Vision-Language-Action) dostaje instrukcję w języku naturalnym, na przykład: 'włóż kołek A w otwór B, a potem dokręć śrubę C'. Na podstawie obrazu z kamery i tego promptu generuje sekwencję ruchów. Pierwsze próby kończą się porażką: ramię uderza w obudowę, nie trafia w otwór, źle ustawia kąt. Kluczowa różnica w stosunku do klasycznego RL polega na tym, że drugi model (VLM) ogląda nagranie każdej próby i diagnozuje, co poszło źle. Następnie przepisuje prompt, wprowadzając globalną zmianę strategii: 'przed włożeniem kołka przechyl go o 15 stopni w lewo i zbliżaj się powoli'. Robot wykonuje kolejną próbę z nowym promptem, a system powtarza pętlę, aż trafi na sekwencję, która działa.

Widziałem już kilka wdrożeń uczenia ze wzmocnieniem w robotyce i większość rozbijała się o to, że algorytm nie dostawał żadnej nagrody, dopóki nie trafił idealnie. PDE omija ten problem, bo zmiana promptu to jak zmiana całego planu działania, a nie tylko delikatne szarpnięcie za przegub. Dzięki temu robot eksploruje radykalnie różne podejścia i znajduje rozwiązanie nawet przy zerowej liczbie udanych prób na starcie.

Proces uczenia montażu sterowany promptem (PDE)

Scenariusz: nowa płytka PCB w fabryce elektroniki

Wyobraźmy sobie zakład produkujący sterowniki IoT. Przychodzi zamówienie na 50 tysięcy sztuk nowej wersji z dodatkowym modułem komunikacyjnym. Montaż wymaga włożenia złącza krawędziowego w slot na płytce i przykręcenia dwóch wkrętów mocujących. Operator wpisuje na tablecie: 'Włóż złącze J1 w slot S1, następnie przykręć wkręty W1 i W2 z momentem 0.5 Nm'. Robot, korzystając z PDE, wykonuje pierwszą próbę: ramię podjeżdża prostopadle do slotu, złącze zahacza o krawędź i wypada. VLM analizuje wideo i zauważa, że kąt podejścia jest zbyt stromy. Przepisuje prompt: 'Podejdź do slotu S1 pod kątem 30 stopni od pionu, wsuń złącze J1 jednym płynnym ruchem, potem dociśnij'. Kolejna próba: złącze wchodzi, ale nie do końca. VLM dodaje: 'po wsunięciu złącza sprawdź opór i dociśnij dodatkowo przez 0.5 sekundy'. Po czterech godzinach i 80 próbach robot montuje złącze poprawnie, a po kolejnych dwóch godzinach opanowuje przykręcanie. Linia rusza następnego dnia rano, a nie za dwa tygodnie.

Korzyści i rachunek ekonomiczny

Przyjmijmy ostrożne założenia: linia montażowa o koszcie przestoju 2500 zł za godzinę, dotychczasowy czas przezbrojenia 80 godzin (2 tygodnie), nowy czas z PDE: 8 godzin. Oszczędność na jednym przezbrojeniu to 72 godziny, czyli 180 tysięcy złotych. Fabryka wprowadzająca 10 nowych wariantów rocznie oszczędza 1,8 miliona złotych. Do tego dochodzi uniknięcie kosztów pracy inżynierów procesu (około 120 roboczogodzin na jedno przezbrojenie) i szybsze wejście na rynek. Dla producenta AGD, gdzie marże są niskie, a rotacja modeli wysoka, PDE może oznaczać różnicę między opłacalnością krótkich serii a koniecznością odrzucania małych zamówień.

Z mojego doświadczenia z pilotaży robotów współpracujących wynika, że największy opór budzi niepewność co do czasu uczenia. PDE daje tu przewidywalność: system przestaje próbować, gdy montaż się uda, a operator widzi postęp na bieżąco.

Co dalej?

Technologia nie jest jeszcze produktem off-the-shelf, ale jej elementy są dostępne. Producenci ramion robotycznych (Universal Robots, Franka Emika) udostępniają API do sterowania na podstawie współrzędnych, a modele VLA można wytrenować na danych z symulatora. Warto zacząć od pilotażu na jednym stanowisku, z zadaniami montażowymi o ograniczonej liczbie kroków (3-5). Kluczowe jest zapewnienie dobrej kamery i oświetlenia, bo VLM musi widzieć detale. Jeśli macie w fabryce choć jedno stanowisko, które przezbrajacie częściej niż raz na kwartał, PDE zwróci się w pierwszym roku.

  • Skrócenie przezbrojenia z 2 tygodni do 8 godzin
  • Oszczędność 180 tys. zł na jedno przezbrojenie
  • Brak potrzeby ręcznego programowania trajektorii

Informacje o artykule

Ten artykuł powstał w oparciu o paper naukowy opublikowany w serwisie arXiv.

Paper: Prompt-Driven Exploration

Autorzy: Sunshine Jiang, John Marangola, David Zhang, Raghuram Kowdeed, Ruiyang Luo i in.

Exploration is essential to RL since a policy cannot improve by repeatedly sampling the behaviors it already prefers. Standard methods inject stochasticity in the action space, but such jitter only yields rollouts close to the original. Escaping a weak policy often requires global perturbations t...

arXiv: arxiv.org/abs/2607.08837

Czytaj więcej o tej technologii: Eksploracja sterowana promptem: jak język uczy roboty próbować nowych rzeczy

Artykuł wygenerowany ze wsparciem sztucznej inteligencji.