Как найти оптимальные линейные базисные функции MDP?

Question

Учитывая набор базисных функций, существует множество работ по нахождению вектора веса для линейной аппроксимации функции значений. Есть ли какой-либо документ о том, как найти базовые функции? Можно ли вычислить оптимальные базисные функции для компактного представления функции значений?

Answer 1

Я так не считаю.

То, что вы в основном ищете, чтобы автоматически найти правильную модель для ваших данных: то есть выбор модели

Если у вас нет какой-то информации, чтобы поддержать некоторые сильные априорные, то маловероятно, что вы можете автоматически найти оптимальный решение. Как правило, вы будете выполнять некоторые функции или использовать байесовский подход для выбора между различными гипотезами.