Обозначения

Перечень обозначений

$\mathbb{E}$ — Математическое ожидание

Среднее случайной величины относительно указанного распределения.

$\mathrm{UCB}1$ — Индекс UCB1

Оптимистическая оценка действия, совмещающая качество и неопределённость.

$\mathrm{random}$ — Случайное действие

Действие, выбранное случайно при исследовании среды.

$\mathrm{sel}$ — Выбранное действие

Действие, выбранное правилом поиска или управления.

$\mathbf{Stoch}$ — Категория стохастических ядер

Категория состояний и вероятностных переходов.

$\mathcal{E}$ — Динамика среды

Стохастическое правило перехода среды и выдачи награды.

$\mathbb{1}$ — Индикатор события

Функция, равная единице при выполнении условия и нулю иначе.

$\star$ — Оптимальная величина

Верхняя звёздочная метка оптимальной политики, функции ценности или выбранного оптимального действия.