Cadeias de Markov de Estados Finitos

Cadeias de Markov

Ex. 1: Distribuio de populao de uma cidade:

CIDADE SUBRBIO

Vetor de probabilidade. Cadeia de Markov:

Matriz Estocstica (P):

Cadeias de Markov

Ex.1: Sendo o deslocamento da populao entre a cidade e o subrbio dado pela matriz de migrao M e, supondo que a distribuio da populao em 1990 seja dada pelo vetor determinar a distribuio de populao em 1991 e 1992.

Cadeias de Markov
Matriz de transio (P): Vetor de estado ():

Condies para utilizao da cadeia de Markov: 1- Como os valores de dependem apenas da matriz de transio P, o estado anteriores no pode influenciar sobre o estado . 2 Como a matriz de transio no varia com o tempo, a probabilidade de uma transio de estado depende apenas de quantos passos a cadeia executou.

Cadeias de Markov
Passeios Aleatrios em {1,...,n} Passeios Aleatrios em grafos Vetores Aleatrios e o Algoritmo Page Rank da Google

Cadeias de Markov

Passeios Aleatrios em {1,...,n}

Localizao da molcula: {1,2..,n}

Possibilidades nas extremidades:

Fronteiras absorventes; Fronteiras refletoras.

Cadeias de Markov

Passeios Aleatrios em {1,...,n}

Ex.: Passeio aleatrio em uma segmento de reta com estados numerados de 1 a 5:

Fronteiras absorventes:

Fronteiras refletoras:

Cadeias de Markov

Passeios Aleatrios em Grafos:

Ex.: Rato no labirinto:

Cadeias de Markov

Passeios Aleatrios em Grafos:

Ex.: Rato no labirinto:

Cadeias de Markov

Passeios Aleatrios em Grafos:

Grafo Direcionado:

Cadeias de Markov

O vetor Estado estacionrio e PageRank Da Google

Vetor estado estacionrio: indica o comportamento do vetor de estado em futuro distante.

Ex.: Distribuio de uma populao:

Cadeias de Markov

O vetor Estado estacionrio e PageRank Da Google

Vetor estado estacionrio:

==q

Probabilidade a longo prazo;

Tempo de ocupao para cada estado.

Cadeias de Markov

O vetor Estado estacionrio e PageRank Da Google

Vetor estado estacionrio:

Colunas convergem para um valor fixo q.

Cadeias de Markov

O vetor Estado estacionrio e PageRank Da Google

Vetor estado estacionrio:

Colunas NO convergem para um valor fixo q.

Cadeias de Markov

vetor Estado estacionrio e PageRank Da O Google

Matriz Regular: uma matriz de transio P para ser regular deve ter todos os elementos de alguma potncia estritamente positivos.

Cadeias de Markov

O vetor Estado estacionrio e PageRank Da Google

Ajuste 1: substituir as colunas que representam estados absorventes por:

Cadeias de Markov

vetor Estado estacionrio e PageRank Da O Google

Ajuste 2: Supondo que a pessoa se encontre em uma pgina j, ela escolher, com probabilidade qualquer pgina que tenha link na pgina . E com probabilidade escolher qualquer outra pgina da rede.

Cadeias de Markov

O vetor Estado estacionrio e PageRank Da Google

Cadeias de Markov

O vetor Estado estacionrio e PageRank Da Google