Вопросы с тегом «bellman-equations»

Я рассматриваю процессы принятия решений по Маркову (MDP), и мне не хватает чего-то в отношении аргумента сокращения. Я почти уверен, что это где-то глупая ошибка (возможно, вычислительная), но в любом случае, я не могу понять это. Здесь это идет. Рассмотрим простую MDP с двумя состояниями и двумя действиями, определенными следующим …

4 decision-theory  academic-graduate  optimization  markov-chain  bellman-equations 

У меня есть следующая проблема оптимизации: max зависимости оту + М т - 1E0∑∞t=0[log(ct)+log(mt)]E0∑t=0∞[log(ct)+log(mt)]E_{0}\sum_{t=0}^{\infty}[log(c_{t}) + log(m_{t})]y+Mt−1pt+Rt−1Bt−1pt=ct+mt+bt+τty+Mt−1pt+Rt−1Bt−1pt=ct+mt+bt+τty + \frac{M_{t-1}}{p_{t}} + R_{t-1}\frac{B_{t-1}}{p_{t}} = c_{t} + m_{t}+b_{t}+\tau_{t} Где строчные буквы обозначают реальные переменные, а - номинальная валовая процентная ставка.RRR Я пытаюсь решить эту проблему, используя подход функции значения, но мне трудно понять, какой …

4 dynamic-programming  bellman-equations