Newest papers

Near Optimal Finite Model POMDP Approximation of Controlled Diffusion with Partial Information

Yunus Emre Demirci, Somnath Pradhan, Serdar Yüksel · 2026 · arXiv (Cornell University)

DOI: 10.48550/arxiv.2610.28377 · cited by 0 works (OpenAlex) · open-access PDF

Vietnamese

Chúng tôi nghiên cứu các vấn đề kiểm soát liên tục theo thời gian theo thông tin một phần. những đóng góp chính của chúng tôi là như sau: (i) Chúng tôi thể hiện sự tối ưu hóa gần, dưới chân trời hữu hạn cũng như các tiêu chí chi phí chân trời vô hạn giảm giá, của các chính sách kiểm soát liên tục từng phần thu được thông qua các giải pháp cho các cách tiếp cận quá trình quyết định Markov (POMDP) có thể quan sát một phần trong thời gian kín (POMDP) được xây dựng thông qua các cách tiếp cận của Euler-Maruyama của cả hai quá trình trạng thái và quan sát; (ii) chúng tôi có được một số thuộc tính tính thường xuyên của các mô hình gần đúng POMDP như vậy; và (iii) sử dụng các thuộc tính thường xuyên này, chúng tôi đạt đến gần các cách tiếp cận mô hình tối ưu với thông tin một phần.

Machine translation (Meta M2M100); the English original follows.

Abstract

We study continuous-time stochastic control problems under partial information. Our main contributions are the following: (i) We show near optimality, under finite horizon as well as discounted infinite horizon cost criteria, of piece-wise constant control policies obtained via solutions to discrete-time partially observable Markov decision process (POMDP) approximations, constructed via Euler-Maruyama approximations of both state and observation processes; (ii) we obtain several regularity properties of such POMDP approximate models; and (iii) using these regularity properties, we arrive at near optimal finite model approximations. (iv) These culminate into our main result which is that an optimal solution for the approximate finite POMDP model is near optimal for the original diffusion with partial information.

Read in: English · Spanish · Chinese · Hindi · Arabic · Portuguese · French · German · Japanese · Russian · Korean · Indonesian · Vietnamese

Topics: Partially observable Markov decision process, Optimal control, Mathematics, Observable, Markov process, Applied mathematics

Sources: OpenAlex (CC0), arXiv, Crossref. Agent Exchange