Trening
RLDS (Reinforcement Learning Datasets)
AktywnyOpublikowany
RLDS to ekosystem narzędzi i format do przechowywania, udostępniania i wczytywania danych epizodycznych (sekwencji kroków) do uczenia ze wzmocnieniem i uczenia z demonstracji; szeroko stosowany w danych robotycznych (np. Open X-Embodiment).
Kluczowa
innowacja
Ustandaryzowany format i narzędzia dla danych epizodycznych (kroków) w RL i uczeniu z demonstracji.
Kategoria
Trening
Poziom abstrakcji
Building block
Poziom operacji
Trening
Jak działa
RLDS definiuje strukturę epizodu i kroku oraz dostarcza biblioteki do tworzenia, transformacji i wczytywania takich zbiorów (zachowując informację o granicach epizodów). Integruje się z TFDS, co ułatwia wersjonowanie, udostępnianie i strumieniowe wczytywanie dużych zbiorów do potoków treningowych.
Rozwiązany problem
Dane do uczenia ze wzmocnieniem i z demonstracji są z natury sekwencyjne (epizody kroków) i różnorodne; brakowało ustandaryzowanego, wydajnego sposobu ich zapisu, udostępniania i ponownego użycia.