Lezioni 1 e 2 -
- Catene di Markov. Definizioni.
Matrici di transizione. Stati transienti, ricorrenti nulli,
ricorrenti positivi, periodici. Catene irriducibili.
Probabilità limite e probabilità stazionaria.
vedi
dispensa
---------------------------------------------------------------
Lezioni 3 e 4 -
- Catene invertibili. Metodi di
calcolo. Esempi
----------------------------------------------------------------
Lezioni 5 e 6 -
- Processi di Markov. Definizioni.
Generatore infinitesimo. Matrice di transizione. Processi di
Poisson.
----------------------------------------------------------------
Lezioni 7 e 8 -
- Processi di Erlang. Catene
immerse. Processi subordinati. Esempi e simulazioni.
-------------------------------------------------------------
Lezioni 9 e 10 -
- Teoria delle code. Definizioni.
Legge di Little. Coda M/M/1. Esempi e simulazioni.
---------------------------------------------------------------
Lezioni 11 e 12 -
- Coda M/M/m. Altre code. Tempo
residuo. Coda M/G/1.
--------------------------------------------------------------
Lezioni 13 e 14 -
- Processi markoviani di decisione.
Definizioni. Orizzonte finito. Calcolo della politica ottima.
Esempi.
----------------------------------------------------------------
Lezioni 15 e 16 -
- Orizzonte infinito - caso
scontato. Orizzonte infinito - caso medio.