Para la programación dinámica estocástica en tiempo continuo, el pequeño y no técnico Art of Smooth Pasting de Dixit es una opción maravillosa. Hace un trabajo muy efectivo de transmitir la intuición básica.
The Economics of Inaction, más reciente de Stokey, también es decente, pero para una persona de mentalidad práctica probablemente tenga un rendimiento inferior a Dixit: su longitud mucho mayor y su notación algo más pesada no producen recompensas proporcionales.
Si los procesos estocásticos subyacentes no son difusiones de Itō, entonces no estoy seguro de cuál es la mejor referencia. El caso más común que he visto (y que uso yo mismo) es el caso de discretamente muchos estados exógenos, donde si actualmente estamos en estado hay una tasa de riesgo constante λ s , s ′ de un cambio al estado s ′ . Afortunadamente, este es un caso bastante simple en la práctica: se puede modificar la ecuación HJB para tener en cuenta la probabilidad de flujo de cambiar de V ( ⋅ , s ) a V ( ⋅ , s ′ )sλs , s′s′V( ⋅ , s )V( ⋅ , s′). (Puede ver esto, por ejemplo, en las ecuaciones (1) - (5) en este documento de Acemoglu y Akcigit . Conceptualmente no es diferente de configurar la ecuación HJB cuando tenemos una difusión Itō como proceso de conducción, excepto que es más simple porque solo obtenemos un sistema de ecuaciones lineales y no necesitamos pensar en el lema de Itō, etc.)
Por supuesto, tal vez también haya una buena referencia de libro de texto para esto, pero a diferencia de los casos potencialmente mucho más complicados que involucran cálculo estocástico, esto es lo suficientemente sencillo como para que un texto nunca me haya parecido necesario.