Technische Universität Ilmenau

Control of Discrete Stochastic Processes - Modultafeln of TU Ilmenau

The module lists provide information on the degree programmes offered by the TU Ilmenau.

Please refer to the respective study and examination rules and regulations for the legally binding curricula (Annex Curriculum).

You can find all details on planned lectures and classes in the electronic university catalogue.

Information and guidance on the maintenance of module descriptions by the module officers are provided at Module maintenance.

Please send information on missing or incorrect module descriptions directly to modulkatalog@tu-ilmenau.de.

module properties Control of Discrete Stochastic Processes in degree program Master Mathematik und Wirtschaftsmathematik 2013 (AM)
module number5808
examination number2400182
departmentDepartment of Mathematics and Natural Sciences
ID of group 2415 (Mathematical Methods in Operations Research)
module leader Dr. Regina Hildenbrandt
term summer term only
languageDeutsch, auf Nachfrage Englisch
credit points4
on-campus program (h)34
self-study (h)86
obligationelective module
examnone
details of the certificate
alternative examination performance due to COVID-19 regulations incl. technical requirements
signup details for alternative examinations
maximum number of participants
previous knowledge and experience

Grundkenntnisse in Stochastik und Optimierung; Stochastische Prozesse

learning outcome

Die Studierenden sind in der Lage,  grundlegender Ideen, Modelle und Verfahren zur Steuerung diskreter stochastischer Prozesse anzuwenden und zu synthetisieren. Die Studierenden sind fähig, entsprechende math. Modelle neu- und weiterzuentwickeln.

 

 

content

In der Vorlesung werden Modelle und Methoden zur Steuerung diskreter stochastischer Prozesse vorgestellt. So wird das ''Bellman-Prinzip'' zur Lösung stochastischer dynamischer  Optimierungsprobleme eingeführt. Ausführlich werden Modelle Markovscher Entscheidungsprozesse betrachtet und entsprechende Lösungsmethoden und deren Grundlagen erläutert. Des Weiteren werden Modelle mit unvollständiger Beobachtung und adaptive Modelle behandelt. Dabei wird auch auf verschiedene Anwendungen (z.B. Reparaturprobleme) eingegangen.

media of instruction and technical requirements for education and examination in case of online participation

Tafel, z. T. Arbeitsblätter, Folien

literature / references

D.P. Bertsekas, Dynamic Programming and Optimal Control, I and II, Athena Scientific, Belmont, Massachusetts. New York-San Francisco-London 1995.

H.-J. Girlich, P. Köchel and H.-U. Küenle, Steuerung dynamischer Systeme, Birkhäuser, Basel 1990.

O. Hernández-Lerma, Adaptive Markov control Processes, Springer-Verlag, New York-Berlin 1989.

Müller, P.H.; Nollau, V. Steuerung stochastischer Prozesse. Akademie-Verlag, Berlin 1984.

M.Puterman, Markov decision processes. Wiley, New York 1994.

evaluation of teaching

Pflichtevaluation:

Freiwillige Evaluation:

Hospitation: