Název: Approximate Dynamic Programming based on High Dimensional Model Representation
Autoři: Pištěk, Miroslav
Typ dokumentu: Výzkumné zprávy
Rok: 2011
Jazyk: eng
Edice: Research Report, svazek: 2310
Abstrakt: In this article, an efficient algorithm for an optimal decision strategy approximation is introduced. The proposed approximation of the Bellman equation is based on HDMR technique. This non-parametric function approximation is used not only to reduce memory demands necessary to store Bellman function, but also to allow its fast approximate minimization. On that account, a clear connection between HDMR minimization and discrete optimization is newly established. In each time step of the backward evaluation of the Bellman function, we relax the parameterized discrete minimization subproblem to obtain parameterized trust region problem. We observe that the involved matrix is the same for all parameters owning to the structure of HDMR approximation. We find eigenvalue decomposition of this matrix to solve all trust region problems effectively.
Klíčová slova: Bellman equation; HDMR approximation; minimization of HDMR functions
Číslo projektu: CEZ:AV0Z10750506 (CEP), GAP102/11/0437 (CEP)
Poskytovatel projektu: GA ČR

Instituce: Ústav teorie informace a automatizace AV ČR (web)
Informace o dostupnosti dokumentu: Dokument je dostupný na externích webových stránkách.
Externí umístění souboru: http://library.utia.cas.cz/separaty/2012/AS/pistek-approximate dynamic programming based on high dimensional model representation.pdf
Původní záznam: http://hdl.handle.net/11104/0203627

Trvalý odkaz NUŠL: http://www.nusl.cz/ntk/nusl-80968


Záznam je zařazen do těchto sbírek:
Věda a výzkum > AV ČR > Ústav teorie informace a automatizace
Zprávy > Výzkumné zprávy