Technische Universität Ilmenau

Control of Discrete Stochastic Processes - Modultafeln of TU Ilmenau

The module lists provide information on the degree programmes offered by the TU Ilmenau.

Please refer to the respective study and examination rules and regulations for the legally binding curricula (Annex Curriculum).

You can find all details on planned lectures and classes in the electronic university catalogue.

Information and guidance on the maintenance of module descriptions by the module officers are provided at Module maintenance.

Please send information on missing or incorrect module descriptions directly to modulkatalog@tu-ilmenau.de.

module properties module number 5808 - common information
module number5808
departmentDepartment of Mathematics and Natural Sciences
ID of group2415 (Mathematical Methods in Operations Research)
module leader Dr. Regina Hildenbrandt
languageDeutsch, auf Nachfrage Englisch
term Sommersemester
previous knowledge and experience

Grundkenntnisse in Stochastik und Optimierung; Stochastische Prozesse

learning outcome

Die Studierenden sind in der Lage,  grundlegender Ideen, Modelle und Verfahren zur Steuerung diskreter stochastischer Prozesse anzuwenden und zu synthetisieren. Die Studierenden sind fähig, entsprechende math. Modelle neu- und weiterzuentwickeln.

 

 

content

In der Vorlesung werden Modelle und Methoden zur Steuerung diskreter stochastischer Prozesse vorgestellt. So wird das ''Bellman-Prinzip'' zur Lösung stochastischer dynamischer  Optimierungsprobleme eingeführt. Ausführlich werden Modelle Markovscher Entscheidungsprozesse betrachtet und entsprechende Lösungsmethoden und deren Grundlagen erläutert. Des Weiteren werden Modelle mit unvollständiger Beobachtung und adaptive Modelle behandelt. Dabei wird auch auf verschiedene Anwendungen (z.B. Reparaturprobleme) eingegangen.

media of instruction and technical requirements for education and examination in case of online participation

Tafel, z. T. Arbeitsblätter, Folien

literature / references

D.P. Bertsekas, Dynamic Programming and Optimal Control, I and II, Athena Scientific, Belmont, Massachusetts. New York-San Francisco-London 1995.

H.-J. Girlich, P. Köchel and H.-U. Küenle, Steuerung dynamischer Systeme, Birkhäuser, Basel 1990.

O. Hernández-Lerma, Adaptive Markov control Processes, Springer-Verlag, New York-Berlin 1989.

Müller, P.H.; Nollau, V. Steuerung stochastischer Prozesse. Akademie-Verlag, Berlin 1984.

M.Puterman, Markov decision processes. Wiley, New York 1994.

evaluation of teaching

Pflichtevaluation:

Freiwillige Evaluation:

Hospitation:

Details reference subject
module nameControl of Discrete Stochastic Processes
examination number2400182
credit points
SWS3
on-campus program (h)
self-study (h)
obligationelective module
examnone
details of the certificate
alternative examination performance due to COVID-19 regulations incl. technical requirements
signup details for alternative examinations
maximum number of participants
Details in degree program Master Mathematik und Wirtschaftsmathematik 2013 (AM), Master Mathematik und Wirtschaftsmathematik 2013 (WM)
module nameControl of Discrete Stochastic Processes
examination number2400182
credit points4
on-campus program (h)34
self-study (h)86
obligationelective module
examnone
details of the certificate
alternative examination performance due to COVID-19 regulations incl. technical requirements
signup details for alternative examinations
maximum number of participants