Control of Discrete Stochastic Processes - Interactive curriculae of TU Ilmenau
The interactive curriculae provide information on the degree programmes offered by the TU Ilmenau.
Please refer to the respective study and examination rules and regulations for the legally binding curricula (Annex Curriculum).
You can find all details on planned lectures and classes in the course catalogue.
Please note that this page is no longer updated. All modules and study plans from PO version 2021 onwards (Bachelor and Master study programs) are now available on the Campus Portal.
| module properties module number 5808 - common information | |
|---|---|
| module number | 5808 |
| department | Department of Mathematics and Natural Sciences |
| ID of group | 2415 (Mathematical Methods in Operations Research) |
| module leader | Dr. Regina Hildenbrandt |
| language | Deutsch, auf Nachfrage Englisch |
| term | Sommersemester |
| previous knowledge and experience | Grundkenntnisse in Stochastik und Optimierung; Stochastische Prozesse |
| learning outcome | Die Studierenden sind in der Lage, grundlegender Ideen, Modelle und Verfahren zur Steuerung diskreter stochastischer Prozesse anzuwenden und zu synthetisieren. Die Studierenden sind fähig, entsprechende math. Modelle neu- und weiterzuentwickeln.
|
| content | In der Vorlesung werden Modelle und Methoden zur Steuerung diskreter stochastischer Prozesse vorgestellt. So wird das ''Bellman-Prinzip'' zur Lösung stochastischer dynamischer Optimierungsprobleme eingeführt. Ausführlich werden Modelle Markovscher Entscheidungsprozesse betrachtet und entsprechende Lösungsmethoden und deren Grundlagen erläutert. Des Weiteren werden Modelle mit unvollständiger Beobachtung und adaptive Modelle behandelt. Dabei wird auch auf verschiedene Anwendungen (z.B. Reparaturprobleme) eingegangen. |
| media of instruction and technical requirements for education and examination in case of online participation | Tafel, z. T. Arbeitsblätter, Folien |
| literature / references | D.P. Bertsekas, Dynamic Programming and Optimal Control, I and II, Athena Scientific, Belmont, Massachusetts. New York-San Francisco-London 1995. H.-J. Girlich, P. Köchel and H.-U. Küenle, Steuerung dynamischer Systeme, Birkhäuser, Basel 1990. O. Hernández-Lerma, Adaptive Markov control Processes, Springer-Verlag, New York-Berlin 1989. Müller, P.H.; Nollau, V. Steuerung stochastischer Prozesse. Akademie-Verlag, Berlin 1984. M.Puterman, Markov decision processes. Wiley, New York 1994. |
| evaluation of teaching | |
| Details reference subject | |
|---|---|
| module name | Control of Discrete Stochastic Processes |
| examination number | 2400182 |
| credit points | |
| SWS | 3 |
| on-campus program (h) | |
| self-study (h) | |
| obligation | elective module |
| exam | none |
| details of the certificate | |
| link to Moodle course | |
| teacher | |
| signup details for alternative examinations | |
| maximum number of participants | |
| Details in degree program Master Mathematik und Wirtschaftsmathematik 2013 (WM), Master Mathematik und Wirtschaftsmathematik 2013 (AM) | |
|---|---|
| module name | Control of Discrete Stochastic Processes |
| examination number | 2400182 |
| credit points | 4 |
| on-campus program (h) | 34 |
| self-study (h) | 86 |
| obligation | elective module |
| exam | none |
| details of the certificate | |
| link to Moodle course | |
| signup details for alternative examinations | |
| maximum number of participants | |