Pracownicy noszą trackery ruchu, aby uczyć roboty prac, które ludzie już znają
- Ethan Carter

- 14 sie
- 12 minut(y) czytania
Pracownicy zakładają kamery i trackery ruchu, aby systemy AI mogły badać ruchy, których opanowanie zajęło ludziom lata. Niedawny artykuł Bloomberga zwraca uwagę na narastającą rywalizację o dane stojące za pracą fizyczną.
Działania te dotyczą uporczywej słabości współczesnej robotyki. Modele językowe mogą przyswoić biliony słów ze źródeł cyfrowych. Roboty nie mogą jednak nauczyć się fizycznego osądu wyłącznie przez przeszukiwanie internetu.
Potrzebują demonstracji łączących wzrok, ruch, dotyk, siłę, wyczucie czasu i zmieniający się stan pobliskich obiektów. Firmy przekształcają więc wykwalifikowanych pracowników w żywe źródła danych dla maszyn zaprojektowanych do pracy w hotelach, magazynach, sklepach, fabrykach i domach.
Powstałe napięcie trudno przeoczyć. Ekspertyza pracownika staje się cenniejsza podczas zbierania danych właśnie dlatego, że powstający system ma wykonywać większą część jego pracy.
Pracownicy stają się zbiorem treningowym
Najnowszy proces trenowania robotów zaczyna się od ludzi wykonujących zwykłą pracę pod nadzwyczajną obserwacją.
W hotelu Lotte w Seulu doświadczony pracownik David Park pokazał, jak składać bankietową serwetkę, podczas gdy kamery rejestrowały jego głowę, klatkę piersiową i dłonie. Według śledztwa Associated Press Park wykonywał to zadanie przez dziewięć lat.
Ćwiczenie uchwyciło znacznie więcej niż końcowy kształt serwetki. Zarejestrowano kolejność ruchów, sposób układania materiału przez Parka oraz to, jak jego dłonie dostosowywały się, gdy tkanina się przesuwała.
Południowokoreański startup robotyczny RLWRLD przekształca takie demonstracje w czytelne dla maszyn dane treningowe. Firma współpracuje również z pracownikami logistyki w CJ i pracownikami sklepów Lawson.
Pracownicy CJ pokazują, jak chwytają, podnoszą i przemieszczają towary w magazynach. Pracownicy Lawson demonstrują, jak układają produkty i zarządzają ekspozycjami żywności.
Przykłady te pokazują, dlaczego dane z miejsc pracy mają znaczenie. Robot potrzebuje czegoś więcej niż filmu pokazującego, że pudełko przeniesiono z jednej półki na drugą. Potrzebuje użytecznego opisu tego, jak ten ruch został wykonany.
Taki opis może obejmować obrazy z kamer, pozycje stawów, ułożenie dłoni, trajektorie ruchu, lokalizacje obiektów i przyłożoną siłę. Każdy zsynchronizowany sygnał pomaga połączyć obserwowaną scenę z działaniem fizycznym.
Inżynierowie RLWRLD dodają kolejną warstwę, powtarzając zadania z użyciem gogli wirtualnej rzeczywistości, kamer i rękawic do śledzenia ruchu. Ludzcy operatorzy mogą następnie prowadzić testowe roboty przez powiązane ruchy.
Proces ten przypomina uczenie przez naśladowanie, w którym system AI uczy się zachowania na podstawie demonstracji zamiast polegać wyłącznie na ręcznie zapisanych regułach. Zasada jest prosta, ale tworzenie wiarygodnych przykładów wymaga dużo pracy.
Roboty mają też inne ciała niż ich ludzcy instruktorzy. Ich stawy mają inne ograniczenia, ich dłonie mogą mieć mniej palców, a ich sensory inaczej rejestrują świat.
Inżynierowie muszą więc przenieść ludzki ruch na dostępne ciało robota. Retargeting odwzorowuje kluczowe elementy ruchu, uwzględniając odmienne proporcje, stawy, ograniczenia równowagi i limity mechaniczne.
Pracownik może obracać nadgarstek podczas składania tkaniny. Konkretny robot może potrzebować przestawić całe ramię, aby uzyskać podobny efekt.
Nawet starannie przygotowane demonstracje nie tworzą automatycznie samodzielnych maszyn. Inżynierowie muszą oznaczyć nagrania, wyrównać strumienie danych, usunąć nieprzydatne sekwencje, wytrenować model i przetestować powstałe zachowanie.
Robot musi następnie poradzić sobie, gdy obiekt znajdzie się w nieco innym miejscu. Ten ostatni wymóg odróżnia zapamiętaną rutynę od użytecznej umiejętności zawodowej.
Własne demonstracje RLWRLD pokazują tę lukę. Podczas jednego obserwowanego testu robot na kołach przesuwał kubki w pobliżu minibaru, lecz przewrócił naczynie. Późniejsze nagranie pokazało humanoida otwierającego pudełko, wkładającego do niego mysz komputerową i umieszczającego zamknięte pudełko na przenośniku.
Postęp ma znaczenie, ale nie dowodzi, że ten sam system potrafi niezawodnie obsłużyć każdą odmianę któregokolwiek z tych zadań. Pokazuje, jak demonstracje mogą wspierać coraz bardziej złożone testy.
Pracownicy nie tylko oznaczają, czy obraz zawiera kubek. Dostarczają sekwencje ujawniające, jak dłonie, obiekty i środowiska oddziałują ze sobą w czasie.
To czyni ludzki ruch nową kategorią materiału treningowego dla AI. Zamienia też miejsca pracy w potencjalne miejsca zbierania danych.
Fizyczna AI ma problem z danymi, którego internet nie rozwiąże
Sprzęt robotyczny rozwija się szybciej niż zasób osadzonych w rzeczywistości, zróżnicowanych i prawnie możliwych do wykorzystania demonstracji.
Współczesny rozwój AI korzystał z ogromnego zasobu tekstów, obrazów, dźwięku i wideo już dostępnych online. Fizyczna AI nie ma równoważnego zapisu działań powiązanych ze sterowaniem robotem.
Internetowy film kulinarny może pokazywać kogoś siekającego cebulę. Zwykle brakuje w nim jednak dokładnej orientacji nadgarstka, przyłożonego nacisku, położenia ostrza i zsynchronizowanych danych opisujących, jak cebula zmieniała się po każdym cięciu.
Polityka robota potrzebuje relacji między obserwacjami a działaniami. Polityka to wyuczony komponent, który wybiera ruch po zinterpretowaniu bieżącej sytuacji.
Badacze mogą zbierać takie relacje, bezpośrednio sterując robotami. Teleoperacja robotów wymaga jednak sprzętu, przeszkolonych operatorów, kontrolowanych środowisk i czasu na kosztownym sprzęcie.
Ludzkie demonstracje oferują inną drogę. Pracownicy już posiadają wyczucie czasu i osąd niezbędne do wykonania zadania, a miejsce pracy zapewnia realistyczne obiekty i warunki.
Wyzwaniem jest przełożenie ich zachowania na sygnały, z których może skorzystać maszyna. Kamery rejestrują widoczny ruch, ale mogą nie uchwycić siły, kontaktu ani ruchów zasłoniętych przez obiekt.
Trackery ruchu szacują pozycję i orientację części ciała. Rękawice z sensorami mogą dodać dane o ruchu palców, a czujniki siły mierzą nacisk lub kontakt.
Żadne pojedyncze urządzenie nie uchwytuje pełnej istoty fizycznej umiejętności. Inżynierowie łączą sygnały, ponieważ wizualnie podobny ruch może dać zupełnie inny rezultat, gdy zmieni się siła lub czas.
Weźmy ustawienie szklanki na półce. Kamera rejestruje drogę ramienia, ale bezpieczne odłożenie zależy od siły chwytu, wyhamowania, wysokości półki i chwili puszczenia.
Człowiek dostosowuje te zmienne niemal nieświadomie. Robot musi je wywnioskować lub zmierzyć, pozostając w granicach swoich ograniczeń mechanicznych.
Projekt Open X-Embodiment Google DeepMind pokazał inną część problemu. Badacze połączyli dane z 22 różnych typów robotów dzięki współpracy z 33 laboratoriami akademickimi.
Powstały zbiór danych robotycznych obejmował ponad 500 umiejętności i 150 000 zadań. Jego celem było pomóc modelom przenosić wiedzę między różnymi ciałami robotów i środowiskami.
Projekt wykorzystywał doświadczenia generowane przez roboty, a nie zwykłe nagrywanie pracowników. Mimo to potwierdza centralne wyzwanie branży: użyteczne zachowanie robota zależy od zróżnicowanych, ustrukturyzowanych danych fizycznych.
Model wytrenowany na jednym ramieniu, w jednym pomieszczeniu i z jednym zestawem obiektów często ma trudności w innych warunkach. To samo działanie może wyglądać inaczej, gdy zmienia się kąt kamery, oświetlenie, narzędzie lub ciało robota.
Dlatego zróżnicowanie jest ważne obok wolumenu. Twórcy potrzebują przykładów od różnych pracowników, z różnych lokalizacji, układów obiektów i wyników zadań.
Potrzebują też nieudanych demonstracji. Zbiór danych zawierający wyłącznie idealne ruchy może nie nauczyć robota wykrywania problemów ani bezpiecznego odzyskiwania sprawności.
Ten wymóg czyni zbieranie danych w miejscach pracy atrakcyjnym. Rzeczywiste środowiska zawierają zagniecenia, bałagan, przerwy, uszkodzone opakowania, nietypowe obiekty i niezliczone inne warunki, które laboratoriom trudno odtworzyć.
Realizm zwiększa jednak ryzyko dla prywatności i jakości danych. Kamera zamontowana na głowie może nagrywać współpracowników, rozmowy, dokumenty, ekrany komputerów, klientów i obszary o ograniczonym dostępie.
Osoby zbierające dane muszą zdecydować, co trafia do zbioru treningowego. Potrzebują też wiarygodnych zapisów wskazujących, kto wyraził zgodę, co zostało zarejestrowane i jak nagranie może być ponownie wykorzystywane.
Proces przypomina wczesny rozwój anotacji danych dla modeli językowych i wizyjnych. Różnica polega na tym, że fizyczne demonstracje rejestrują praktyczną wiedzę fachową wraz z informacjami osobistymi i środowiskowymi.
Zarejestrowany ruch może ujawnić, jak konkretny pracownik rozwiązuje problem. Powtarzające się nagrania mogą ujawnić wzorce produktywności, ograniczenia fizyczne lub nieformalne techniki, które nigdy nie znalazły się w instrukcji postępowania.
Dlatego wyścig o dane dla fizycznej AI to coś więcej niż dodawanie kamer w miejscu pracy. To próba sformalizowania wiedzy ukrytej, czyli kompetencji, z których ludzie korzystają, nie opisując ich w pełni.
Po sformalizowaniu taka wiedza może trenować wiele maszyn. Jej wartość przestaje być ograniczona do pierwotnego zadania lub lokalizacji.
Prawdziwa rywalizacja to ludzka umiejętność kontra skala maszyn
Sednem rywalizacji nie są dziś pracownicy przeciw robotom, lecz ludzka wiedza fachowa przeciw skali obiecywanej przez modele robotyczne wielokrotnego użytku.
Wykwalifikowany pracownik doskonali się przez lata powtarzalnej pracy. Jego wiedza pozostaje związana z jedną osobą i zwykle przynosi korzyść jednemu miejscu pracy naraz.
Model robota oferuje inną propozycję ekonomiczną. Twórcy chcą zarejestrować przykłady raz, udoskonalić je poprzez trening i rozpowszechnić wynikającą z tego zdolność na wielu maszynach.
Ta obietnica wyjaśnia intensywny popyt na dane z ludzkich demonstracji. Ruch zarejestrowany w jednym hotelu lub magazynie może stać się materiałem wejściowym dla modelu wdrożonego gdzie indziej.
Nvidia opisuje tę strategię za pośrednictwem swojej platformy robotycznej Isaac GR00T. Firma twierdzi, że modele GR00T łączą wideo z internetu, teleoperację w świecie rzeczywistym i dane syntetyczne.
Jej proces GR00T-Mimic przekształca demonstracje teleoperowane w dane o ruchu do uczenia przez naśladowanie. Inny proces może rozszerzyć niewielki zestaw ludzkich przykładów w symulacji.
W jednym teście opisanym przez firmę Nvidia wygenerowała 780 000 syntetycznych trajektorii w 11 godzin. Firma określiła ten wolumen jako równoważny 6 500 godzinom danych z ludzkich demonstracji.
Nvidia poinformowała też o 40-procentowej poprawie wydajności, gdy syntetyczne trajektorie połączono z rzeczywistymi danymi. Liczby te pochodzą z własnego procesu przetwarzania ruchu firmy Nvidia, a nie z niezależnego benchmarku obejmującego całą branżę.
Wynik mimo to wyjaśnia, dlaczego rzeczywiste demonstracje mają strategiczną wartość. Dane syntetyczne mogą mnożyć przykłady, ale twórcy najpierw potrzebują osadzonych w rzeczywistości ruchów i realistycznych definicji zadań.
Symulacja może zmieniać pozycje obiektów, kąty kamer i ścieżki ruchu. Nie może zagwarantować, że leżące u podstaw zachowanie odzwierciedla subtelne ograniczenia prawdziwego miejsca pracy.
Tworzy to hybrydowy model treningu robotów. Pracownicy dostarczają autentycznych przykładów, operatorzy teleoperacji łączą te przykłady ze sterowaniem robotów, a symulacja rozszerza powstały zbiór danych.
Twórcy robotów następnie testują politykę na fizycznym sprzęcie. Awaria tworzy nowe dane, a ludzie interweniują, gdy system napotyka nieznane warunki.
Ludzka praca jest więc obecna na każdym etapie. Pracownicy demonstrują zadanie, anotatorzy oczyszczają nagrania, operatorzy sterują robotami, a zespoły bezpieczeństwa oceniają awarie.
Automatyzacja nie powstaje wyłącznie dzięki uczeniu maszynowemu. Wyłania się z długiego łańcucha ludzkich instrukcji i poprawek.
Najsilniejszy argument biznesowy głosi, że ten łańcuch z czasem staje się bardziej wydajny. Każda nowa demonstracja może ulepszyć model wykorzystywany przez wiele robotów i w wielu zadaniach.
Sceptyczna odpowiedź skupia się na ostatniej mili. Robot, który odnosi sukces podczas demonstracji, może nadal zawieść, gdy zmienią się materiały, oświetlenie lub natężenie ruchu ludzi.
Praca w hotelu stanowi użyteczny przykład. Złożenie jednej serwetki wymaga zręczności, lecz przygotowanie całej sali bankietowej obejmuje także nawigację, sekwencjonowanie działań, kontrolę wizualną, obsługę wyjątków i koordynację z kolegami.
Praca w magazynie wiąże się z podobnymi komplikacjami. Pudełka różnią się wagą i stanem, w alejkach przebywają ludzie, a pozornie prosty chwyt może zależeć od niestabilnej zawartości.
Roboty potrzebują zarówno zdolności manipulacyjnych, jak i oceny sytuacji. Model spełniający pierwszy wymóg nie spełnia automatycznie drugiego.
Ta luka wywiera presję na dwie grupy. Firmy robotyczne muszą pokazać, że duże zbiory danych demonstracyjnych zapewniają niezawodne działanie w rzeczywistych warunkach, a nie jedynie dopracowane testy.
Pracodawcy muszą zdecydować, czy zbieranie danych wspiera pracowników, przeprojektowuje stanowiska pracy, czy przygotowuje wybrane zadania do automatyzacji. Te rezultaty mogą współistnieć w jednej organizacji.
Pracownicy mierzą się z największą niepewnością. Ich wiedza staje się niezbędnym wkładem, lecz ich prawa do powstałego w rezultacie modelu pozostają słabo zdefiniowane.
Tradycyjne umowy o pracę często przypisują pracodawcy rezultaty pracy. Dane o ruchu rodzą trudniejsze pytania, ponieważ rejestrują ciało pracownika, jego nawyki i zgromadzone umiejętności.
Czy trajektoria dłoni jest jedynie danymi operacyjnymi? Czy kompletna demonstracja stanowi formę danych osobowych, własności intelektualnej miejsca pracy, czy też jedno i drugie?
Odpowiedź wpływa na zgodę, wynagrodzenie, przechowywanie i ponowne wykorzystanie danych. Wpływa również na to, czy pracownicy mogą kwestionować wykorzystanie zbioru danych poza jego pierwotnym celem.
Organizacje już korzystają z zarządzania wiedzą, aby zachowywać pisemne procedury i pamięć instytucjonalną. Przechwytywanie ruchu rozszerza ten cel na zachowania fizyczne, gdzie granice są mniej ustalone.
Powstała baza danych może przetrwać pracownika, który ją zasilił. Może też oddzielić wiedzę ekspercką od osoby, która ją rozwinęła.
To oddzielenie jest kluczowym odwróceniem sytuacji. Umiejętności uznawane za najtrudniejsze do zautomatyzowania stają się bardzo wartościowe, ponieważ generują przykłady, których automatyzacji wciąż brakuje.
Lepsze demonstracje nie eliminują ryzyka dla pracowników
Bogatszy zbiór danych może poprawić działanie robotów, jednocześnie zwiększając obawy dotyczące nadzoru, zgody i pozycji negocjacyjnej osób rejestrowanych.
Kamera w miejscu pracy nie rejestruje wyłącznie docelowego ruchu. Może uchwycić twarze, głosy, ekrany komputerów, informacje o klientach, procedury bezpieczeństwa oraz chwile niezwiązane ze szkoleniem robotów.
System śledzenia ruchu może ujawnić więcej niż technikę wykonywania zadania. Powtarzane nagrania mogą ujawniać zmęczenie, różnice fizyczne, tempo pracy, urazy lub odstępstwa od preferowanej przez kierownictwo metody.
To tworzy problem celu wykorzystania. Dane zebrane do szkolenia robota mogą później służyć do oceny pracownika, monitorowania produktywności, dochodzeń dotyczących bezpieczeństwa lub innych decyzji zarządczych.
Rzeczywista zgoda wymaga czegoś więcej niż poproszenia pracownika o założenie urządzenia. Pracownicy muszą wiedzieć, co system rejestruje, kto otrzymuje dane i jak długo pozostają one dostępne.
Muszą również wiedzieć, czy odmowa wpływa na grafik, awans lub dalsze zatrudnienie. Zgoda staje się wątpliwa, gdy pracownik nie może odmówić bez ryzyka utraty dochodu.
Badanie z 2026 roku dotyczące robotów magazynowych skoncentrowanych na potrzebach pracowników wykazało szerokie zainteresowanie użyteczną automatyzacją, ale także udokumentowało obawy związane z prywatnością i zgodą. Uczestnicy chcieli, by roboty rozpoznawały, kiedy ludzie potrzebują przestrzeni osobistej.
Badanie magazynowe podkreślało również udział pracowników w projektowaniu. Jego wyniki sugerują, że akceptacja technologii częściowo zależy od kontroli, przejrzystości i kontekstu miejsca pracy.
Programy szkolenia robotów potrzebują podobnych zabezpieczeń. Zbieranie danych powinno mieć określony cel, ograniczony dostęp, udokumentowany okres przechowywania oraz proces usuwania materiałów niezwiązanych z celem.
Osoby postronne stanowią kolejne wyzwanie. Klienci i współpracownicy mogą pojawić się na nagraniu pierwszoosobowym, nawet jeśli nigdy nie zgodzili się na udział w zbiorze danych szkoleniowych.
Rozmywanie twarzy może ograniczyć część ekspozycji, ale nie rozwiązuje każdego problemu. Mundury, głosy, lokalizacje i rutyny pracy mogą pośrednio identyfikować osoby.
Same dane o ruchu również mogą być charakterystyczne. Zbiór danych może ujawniać cechy fizyczne lub wzorce zachowań nawet po usunięciu nazwisk.
Firmy muszą więc traktować pochodzenie danych jako kluczową funkcję. Pochodzenie danych dokumentuje, skąd pochodzą dane, jakie zgody mają zastosowanie i jak każdy zasób zmieniał się podczas przetwarzania.
Bez informacji o pochodzeniu deweloper robotów może otrzymać użyteczne pliki, nie wiedząc, czy osoby i lokalizacje zostały właściwie zatwierdzone.
Wynagrodzenie stanowi odrębny spór. Pracownik może otrzymywać zwykłe wynagrodzenie podczas demonstrowania zadania, jednorazową płatność albo żadnego dodatkowego wynagrodzenia.
Zbiór danych może następnie wspierać model o wartości znacznie wykraczającej poza pierwotną zmianę. Obecne ustalenia płacowe rzadko uwzględniają wielokrotne komercyjne ponowne wykorzystanie zarejestrowanej wiedzy eksperckiej.
Nie oznacza to, że każdy pracownik musi otrzymywać tantiemy za każde działanie robota. Oznacza jednak, że pracodawcy i deweloperzy potrzebują jasnego stanowiska przed rozpoczęciem zbierania danych.
Negocjacje zbiorowe mogą wpłynąć na to stanowisko. Przedstawiciele pracowników mogą negocjować limity dotyczące urządzeń, płatności, zasady dostępu, testy bezpieczeństwa i ograniczenia wykorzystywania nagrań do celów dyscyplinarnych.
Koreańska Konfederacja Związków Zawodowych ostrzegła, że szerokie wdrożenie robotów może zakłócić rozwój przyszłych wykwalifikowanych pracowników. Jej obawy wykraczają poza bezpośrednią utratę miejsc pracy.
Młodsi pracownicy uczą się, obserwując doświadczonych kolegów i ćwicząc pod nadzorem. Jeśli automatyzacja usunie zadania na poziomie podstawowym, mniej osób awansuje do ról, w których rozwija się głębsza wiedza ekspercka.
Zbiór danych szkoleniowych może zachować obecną metodę eksperta. Nie gwarantuje jednak, że system wygeneruje nową wiedzę rzemieślniczą, gdy zmienią się materiały, narzędzia lub oczekiwania klientów.
Ludzie nieustannie modyfikują techniki. Statyczny korpus szkoleniowy może zamrozić jedną wersję pracy, podczas gdy rzeczywista praca nadal ewoluuje.
RLWRLD argumentował, że ludzkie mistrzostwo pozostaje istotne nawet wtedy, gdy AI odtwarza istniejące umiejętności. To rozróżnienie zasługuje na uwagę.
Odtwarzanie i wynajdywanie nie są tym samym. Robot może skopiować zademonstrowaną sekwencję, nie rozumiejąc, dlaczego ekspert odstąpił od standardowej procedury.
Bezpieczeństwo stanowi kolejne ograniczenie. Robot szkolony na przeciętnych zachowaniach może napotkać rzadką sytuację, w której oczekiwany ruch staje się niebezpieczny.
Deweloperzy potrzebują metod oceny obejmujących nietypowe obiekty, osoby znajdujące się w pobliżu, zużycie mechaniczne, awarie czujników i warunki adwersarialne. Udana demonstracja dostarcza niewielu dowodów na działanie w takich skrajnych sytuacjach.
Pracownicy powinni uczestniczyć w tych ocenach, ponieważ rozpoznają zagrożenia w miejscu pracy, które projektanci benchmarków mogą przeoczyć. Ich wkład nie powinien kończyć się wraz z wyłączeniem kamer.
Podejście skoncentrowane na pracownikach traktowałoby ich jako ekspertów dziedzinowych na wszystkich etapach projektowania, testowania i wdrażania. Nie sprowadzałoby ich do anonimowych źródeł ruchu.
Co nastąpi po zmianie związanej z przechwytywaniem ruchu
Kolejna faza będzie mierzona niezawodnością robotów, udokumentowanymi prawami do danych oraz dowodami, że modele przenoszą się poza kontrolowane demonstracje.
Pierwszym sygnałem, który warto obserwować, jest wydajność w aktywnych miejscach pracy. Starannie zmontowane demonstracje i testy laboratoryjne nie mogą potwierdzić, czy system działa przez pełne zmiany.
Deweloperzy muszą raportować wskaźniki ukończenia zadań, interwencje ludzi, skuteczność odzyskiwania po błędach i incydenty bezpieczeństwa. Wyniki powinny obejmować zmieniające się obiekty i realistyczne zakłócenia.
Niezależna ocena wzmocniłaby te twierdzenia. Demonstracje firmowe pozostają użyteczne, ale z natury prezentują zadania i warunki wybrane przez dewelopera.
Robot, który pod nadzorem składa jedną serwetkę, nie jest jeszcze uniwersalnym pracownikiem hotelu. System, który zamyka jedno pudełko, nie jest jeszcze autonomiczną operacją magazynową.
Drugim sygnałem jest przenoszenie umiejętności między robotami i lokalizacjami. Wielokrotnego użytku model bazowy powinien stosować wnioski z jednego robota lub miejsca w innym, przy ograniczonym ponownym szkoleniu.
Badania DeepMind nad współdzieleniem między robotami oraz strategia Nvidia oparta na mieszanych danych mają na celu rozwiązanie tego problemu. Postęp wymaga czegoś więcej niż skalowania jednego programu zbierania danych.
Deweloperzy muszą wykazać, że szkolenie na danych od jednej grupy pracowników poprawia realizację nieznanych zadań, obsługę obiektów lub działanie w nowych środowiskach. Słaby transfer ograniczyłby ekonomiczną przewagę gromadzenia ogromnych bibliotek demonstracji.
Silny transfer uczyniłby własność danych bardziej istotną. Jeden zarejestrowany proces pracy mógłby wpłynąć na maszyny daleko poza miejscem pracy, w którym powstał.
Trzecim sygnałem jest pojawienie się egzekwowalnych zasad dotyczących danych. Firmy coraz częściej opisują zgodę, prywatność i pochodzenie danych jako funkcje swoich procesów zbierania danych.
Kluczowym testem jest to, czy te zobowiązania staną się warunkami umownymi, zapisami audytowymi, procedurami usuwania danych i prawami pracowników. Same publiczne zapewnienia nie rozstrzygają, jak dane są ponownie wykorzystywane.
Organy regulacyjne mogą również badać, czy nagrania kwalifikują się jako informacje biometryczne lub dane osobowe. Odpowiedź może różnić się w zależności od jurysdykcji i metod przechwytywania.
Zwykłe nagranie wideo, szczegółowy model dłoni i obraz ultrasonograficzny ścięgien nie ujawniają identycznych informacji. Pracodawcy nie powinni traktować ich jako wymiennych.
Postęp techniczny skomplikuje to rozróżnienie. Badacze z MIT opracowali ultrasonograficzną opaskę na nadgarstek, która obrazuje mięśnie, ścięgna i więzadła podczas ruchu dłoni.
Model AI przekształca te obrazy w pozycje dłoni i pięciu palców. Zespół przetestował system z ośmioma ochotnikami i śledził 22 stopnie swobody.
Badacze zademonstrowali sterowanie robotyczną dłonią grającą prostą melodię na pianinie oraz obsługującą komputerową grę w koszykówkę. Gromadzą dane od osób o większej różnorodności kształtów i rozmiarów dłoni.
Profesor MIT Xuanhe Zhao powiedział, że to podejście może dostarczyć duże ilości danych szkoleniowych dla zręcznych humanoidalnych robotów. Ultrasonograficzna opaska na nadgarstek pokazuje również, jak intymne mogą stać się przyszłe zbiory danych o ruchu.
Kamera na głowie rejestruje to, co widzi pracownik. Urządzenie ultrasonograficzne rejestruje wewnętrzny ruch pod skórą.
Ten postęp techniczny sprawia, że jasne zasady stają się pilniejsze. Im precyzyjniej urządzenie rejestruje ludzki ruch, tym bardziej wartościowy i potencjalnie wrażliwy staje się jego wynik.
Najbliższe miesiące powinny pokazać, czy firmy zajmujące się fizyczną AI potrafią przekształcić lepsze demonstracje w powtarzalne operacje. Warto obserwować wdrożenia raportujące trwałą wydajność, a nie krótkie testy.
Warto również obserwować porozumienia pracownicze dotyczące rejestracji za pomocą urządzeń noszonych na ciele. Szczegółowe postanowienia dotyczące zgody, wykorzystania wtórnego, przechowywania i wynagrodzenia wskazywałyby, że prawa pracowników do danych stają się wymogami operacyjnymi.
Na koniec warto obserwować, czy modele robotów uogólniają się na różne lokalizacje i maszyny. Jeśli tak, ludzkie demonstracje staną się strategicznym zasobem porównywalnym z głównymi korpusami szkoleniowymi AI.
Jeśli nie, fizyczna AI pozostanie zależna od kosztownej, specyficznej dla danego miejsca inżynierii i ciągłej interwencji ludzi.
Pracownicy uczą maszyny więcej niż pojedynczych ruchów. Ujawniają niewypowiedzianą strukturę pracy fizycznej — po jednym chwycie, obrocie, poprawce i odzyskaniu kontroli naraz.
Kluczowe pytanie nie brzmi już, czy tę wiedzę można zarejestrować. Brzmi ono: czy organizacje potrafią z niej korzystać, nie wymazując ludzi, którzy ją stworzyli.
Programiści, pracodawcy i pracownicy powinni domagać się tych samych dowodów, zanim zaakceptują szeroko zakrojone twierdzenia: niezawodnego działania, przejrzystego pochodzenia danych oraz rzeczywistej kontroli nad przechwytywaną wiedzą ekspercką.
Taki standard nie zatrzymałby uczenia się robotów. Sprawiłby, że gospodarka fizycznej AI musiałaby uwzględniać swoje najważniejsze źródło inteligencji — ludzi, którzy już wykonują tę pracę.


