Oblicza się RPE = nagroda otrzymana − nagroda przewidywana; sygnał ten aktualizuje przewidywania i politykę.
Agent musi wiedzieć, o ile rzeczywisty wynik odbiega od oczekiwań, by zaktualizować zachowanie.