Pies-robot sam nauczył się chodzić. Ile trwała nauka?

Robot samodzielnie nauczył się chodzić. Nauka trwała stosunkowo krótko, a jej efekty są zdumiewające.

nauka
Adam Adamczyk19 lipca 2022
16

źródło: YouTube | Danijar Hafner

Sztuczna inteligencja towarzyszy nam niemal każdego dnia – na przykład, kiedy toczymy wirtualne pojedynki z botami w grach komputerowych. Modele uczenia maszynowego są coraz bardziej zaawansowane, a to oznacza, że programy opierające się na AI są w stanie uzyskiwać odpowiedzi szybciej i z większą precyzją. Sztuczna inteligencja może uczyć się samodzielnie, czego dowiódł pewien pies robot, który sam nauczył się chodzić.

Pierwsze kroki robota

Danijar Hafner i jego współpracownicy z Uniwersytetu Kalifornijskiego w Berkeley wykorzystali technikę uczenia maszynowego, zwaną uczeniem wzmacniającym (reinforcement learning), która polega na trenowaniu algorytmów poprzez nagradzanie ich za pożądane działania. Dzięki temu algorytmowi udało się sprawić, by pies-robot samodzielnie nauczył się chodzić. Przez pierwsze pół godziny stawiał on kroki bardzo nieporadnie, jednak jego ruchy z czasem zaczęły stawać się bardziej stabilne. Samodzielna nauka chodzenia zajęła robotowi godzinę, a po tym czasie był w stanie przemieszczać się na tyle pewnie, by od razu stawać na nogi po przewróceniu.

Czym jest uczenie wzmacniające?

Reinforced Learning to metoda uczenia maszynowego oparta na nagradzaniu pożądanych zachowań i/lub karaniu tych niechcianych. Ogólnie rzecz biorąc, obiekt poddawany tego typu nauce jest w stanie postrzegać i interpretować swoje środowisko, podejmować działania i uczyć się metodą prób i błędów. Uczenie wzmacniające jest oparte na konkretnym algorytmie stworzonym przez programistów, a ten użyty do nauki pierwszych kroków opisanego robota nosi nazwę Dreamer.

Wyszkoliliśmy czworonożnego robota, aby nauczył się chodzić bezpośrednio w świecie fizycznym bez wsparcia symulatorów. Nauka od zera w ciągu zaledwie godziny była możliwa dzięki zastosowaniu algorytmu Dreamer do ciągłego uczenia się modelu świata i planowania wewnątrz niego.

Więcej artykułów związanych ze sztuczną inteligencją przeczytacie tutaj:

  1. 865 dni. Tyle znam się ze sztuczną inteligencją
  2. AI znalazła sposób, żeby zapewnić człowiekowi szczęście

Adam Adamczyk

Adam Adamczyk

Pisaniem zajmuje się zawodowo od 2013 roku. W 2021 roku dołączył do GRYOnline.pl, gdzie poza tematyką gamingową zajmuje się informacjami stricte technologicznymi. Współpracował z największymi sklepami muzycznymi w Polsce, tworząc artykuły związane z instrumentami i ogólnie pojętym udźwiękowieniem. Grami komputerowymi interesuje się od dziecka. Poza tym jego zainteresowania obejmują grę na gitarze, komponowanie muzyki oraz sporty siłowe.

Mimo ostrej krytyki Intel nie zamierza wycofywać wadliwych procesorów 13. i 14. generacji

Mimo ostrej krytyki Intel nie zamierza wycofywać wadliwych procesorów 13. i 14. generacji

Chińczycy przerażają swoimi pomysłami. „Wskrzeszają” zmarłych przy pomocy AI

Chińczycy przerażają swoimi pomysłami. „Wskrzeszają” zmarłych przy pomocy AI

Na widok tej promocji opad szczęki gwarantowany. Flagowy Samsung Galaxy S24 1000 zł taniej - brzmi jak interes życia

Na widok tej promocji opad szczęki gwarantowany. Flagowy Samsung Galaxy S24 1000 zł taniej - brzmi jak interes życia

Konstruktor zbudował klona kultowego Macintosha Plus. Obsługuje programy i sprzęt sprzed trzech dekad

Konstruktor zbudował klona kultowego Macintosha Plus. Obsługuje programy i sprzęt sprzed trzech dekad

Mapy od Apple trafiły do przeglądarki. Na razie to wersja beta, ale może zagrozić Mapom Google

Mapy od Apple trafiły do przeglądarki. Na razie to wersja beta, ale może zagrozić Mapom Google