Pies-robot sam nauczył się chodzić. Ile trwała nauka?

Robot samodzielnie nauczył się chodzić. Nauka trwała stosunkowo krótko, a jej efekty są zdumiewające.

nauka
Adam Adamczyk19 lipca 2022
16

źródło: YouTube | Danijar Hafner

Sztuczna inteligencja towarzyszy nam niemal każdego dnia – na przykład, kiedy toczymy wirtualne pojedynki z botami w grach komputerowych. Modele uczenia maszynowego są coraz bardziej zaawansowane, a to oznacza, że programy opierające się na AI są w stanie uzyskiwać odpowiedzi szybciej i z większą precyzją. Sztuczna inteligencja może uczyć się samodzielnie, czego dowiódł pewien pies robot, który sam nauczył się chodzić.

Pierwsze kroki robota

Danijar Hafner i jego współpracownicy z Uniwersytetu Kalifornijskiego w Berkeley wykorzystali technikę uczenia maszynowego, zwaną uczeniem wzmacniającym (reinforcement learning), która polega na trenowaniu algorytmów poprzez nagradzanie ich za pożądane działania. Dzięki temu algorytmowi udało się sprawić, by pies-robot samodzielnie nauczył się chodzić. Przez pierwsze pół godziny stawiał on kroki bardzo nieporadnie, jednak jego ruchy z czasem zaczęły stawać się bardziej stabilne. Samodzielna nauka chodzenia zajęła robotowi godzinę, a po tym czasie był w stanie przemieszczać się na tyle pewnie, by od razu stawać na nogi po przewróceniu.

Czym jest uczenie wzmacniające?

Reinforced Learning to metoda uczenia maszynowego oparta na nagradzaniu pożądanych zachowań i/lub karaniu tych niechcianych. Ogólnie rzecz biorąc, obiekt poddawany tego typu nauce jest w stanie postrzegać i interpretować swoje środowisko, podejmować działania i uczyć się metodą prób i błędów. Uczenie wzmacniające jest oparte na konkretnym algorytmie stworzonym przez programistów, a ten użyty do nauki pierwszych kroków opisanego robota nosi nazwę Dreamer.

Wyszkoliliśmy czworonożnego robota, aby nauczył się chodzić bezpośrednio w świecie fizycznym bez wsparcia symulatorów. Nauka od zera w ciągu zaledwie godziny była możliwa dzięki zastosowaniu algorytmu Dreamer do ciągłego uczenia się modelu świata i planowania wewnątrz niego.

Więcej artykułów związanych ze sztuczną inteligencją przeczytacie tutaj:

  1. 865 dni. Tyle znam się ze sztuczną inteligencją
  2. AI znalazła sposób, żeby zapewnić człowiekowi szczęście

Adam Adamczyk

Adam Adamczyk

Pisaniem zajmuje się zawodowo od 2013 roku. W 2021 roku dołączył do GRYOnline.pl, gdzie poza tematyką gamingową zajmuje się informacjami stricte technologicznymi. Współpracował z największymi sklepami muzycznymi w Polsce, tworząc artykuły związane z instrumentami i ogólnie pojętym udźwiękowieniem. Grami komputerowymi interesuje się od dziecka. Poza tym jego zainteresowania obejmują grę na gitarze, komponowanie muzyki oraz sporty siłowe.

Wyciekła specyfikacja RTX 5070 Ti; karta pobierze więcej prądu niż 4070 Ti

Wyciekła specyfikacja RTX 5070 Ti; karta pobierze więcej prądu niż 4070 Ti

Chcą zmiażdżyć konkurencję ceną; nowe laptopy z procesorami Snapdragon będą tanie i ze wsparciem dla AI

Chcą zmiażdżyć konkurencję ceną; nowe laptopy z procesorami Snapdragon będą tanie i ze wsparciem dla AI

Ustawienia Stalker 2: Zdecydowanie powinieneś zmienić te 9 ustawień grafiki, sterowania, HDR i inne

Ustawienia Stalker 2: Zdecydowanie powinieneś zmienić te 9 ustawień grafiki, sterowania, HDR i inne

Do dziś korzystam z konsoli, która sprzedawała się tak dobrze, że niemal pobiła wynik PlayStation 2. Nintendo DS właśnie kończy 20 lat

Do dziś korzystam z konsoli, która sprzedawała się tak dobrze, że niemal pobiła wynik PlayStation 2. Nintendo DS właśnie kończy 20 lat

RTX 5090 będzie tańszy niż sądziliśmy; Nvidia ma zaskoczyć graczy

RTX 5090 będzie tańszy niż sądziliśmy; Nvidia ma zaskoczyć graczy