Sumários

First passage probabilities of a markov chain

19 Outubro 2017, 10:30 Kamil Feridun Turkman

Defintion and properties of first passage probabilities. Consequent classification of states into recorrente and transiente states. Recorrent and tansient classes


Aula 8

17 Outubro 2017, 09:00 Fernando Sequeira

Cadeias de Markov em tempo discreto. Exercícios envolvendo decomposião em classes comunicantes e tempos de primeira passage. Classificação de classes .


Classification of the states

17 Outubro 2017, 08:00 Kamil Feridun Turkman

 


Aula 7

12 Outubro 2017, 11:30 Fernando Sequeira

Cadeias de Markov em tempo discreto. Exercícios envolvendo cálculos de probabilidades e matriz de probabilidades de transição


Markov chains: homogeneous transition probabilities

12 Outubro 2017, 10:30 Kamil Feridun Turkman

The assumption of homogeneous transition probabilities, matrix  of one step transition probabilities. chapman-Kolmogrov eguations