Model decyzyjny (decision model)
Jak działa
1) Definicja przestrzeni decyzji: zbiór dopuszczalnych działań/alternatyw. 2) Reprezentacja stanu i niepewności: cechy wejściowe oraz prawdopodobieństwa stanów natury (często z modelu predykcyjnego). 3) Funkcja celu: użyteczność, koszt lub ryzyko przypisane parom (działanie, wynik). 4) Kryterium decyzyjne: np. maksymalizacja oczekiwanej użyteczności, minimalizacja oczekiwanego kosztu, strategie min-max dla przypadków bez rozkładu. 5) Reguła/polityka: odwzorowanie stanu na działanie, wyznaczane analitycznie (np. próg Bayesa), przez programowanie dynamiczne (MDP) albo uczone (polityka RL). 6) Wykonanie i aktualizacja: decyzja jest podejmowana, obserwuje się wynik, a model może być dostrajany (np. uczenie online).
Rozwiązany problem
Rozwiązuje problem przejścia od wiedzy o niepewnej przyszłości do konkretnego działania: samo prawdopodobieństwo nie mówi, co wybrać, jeśli koszty błędów są asymetryczne lub istnieją ograniczenia. Model decyzyjny jawnie koduje cel, koszty i reguły, dzięki czemu decyzje są spójne, powtarzalne i uzasadnialne.
Komponenty
Zbiór dopuszczalnych działań lub alternatyw, spośród których model wybiera.
Cechy wejściowe oraz prawdopodobieństwa stanów natury, zwykle dostarczane przez model predykcyjny.
Wartościowanie par działanie-wynik, kodujące preferencje, ryzyko i asymetrię kosztów błędów.
Odwzorowanie stanu na działanie, wyznaczone analitycznie, przez programowanie dynamiczne lub uczone.
Ewolucja
von Neumann i Morgenstern formalizują racjonalny wybór przez maksymalizację oczekiwanej użyteczności — fundament modeli decyzyjnych.
Bellman i programowanie dynamiczne dostarczają metody wyznaczania optymalnych polityk w decyzjach sekwencyjnych.
Deep reinforcement learning (np. DQN) pozwala uczyć modele decyzyjne bezpośrednio z surowych obserwacji.
Hiperparametry (konfigurowalne osie)
Reguła optymalizacji: oczekiwana użyteczność, minimalizacja ryzyka, min-max, satisficing.
Czy decyzje są dyskretne (skończony zbiór) czy ciągłe — determinuje metodę optymalizacji.
Wymagania sprzętowe
Model decyzyjny to warstwa logiczno-matematyczna; jej koszt zależy od bazowego modelu predykcyjnego lub metody optymalizacji, nie od konkretnego akceleratora.