Przewaga (advantage) jest przeliczana i redystrybuowana w obrębie grupy rolloutów tego samego zapytania, by wyraźniej różnicować lepsze i gorsze odpowiedzi.
Naiwne oszacowania przewagi w grupie mogą źle rozkładać zasługi, prowadząc do niestabilnego lub słabego uczenia.
