Se o sistema está no estado i = 2 na etapa n, ele tem probabilidade igual a 0,1 de passar para o estado 1 na etapa (n+1)

Se o sistema está no estado i = 1 ou i = 3 na etapa n, ele poderá estar em quaisquer dos estados j = 1,2,3 na etapa (n+1), pois todas as probabilidades da primeira e terceira linha são não nulas.

O vetor P_1j = [ 0,4 0,6 0,2] é a distribuição de saída do estado 1 para os estados j = 1,2,3.

O vetor P_1j = [ 0,4 0 0,5] é a distribuição de saída do estado 1 para os estados j = 1,2,3.

Se o sistema está nos estados i = 1 ou i = 3, na etapa n, eles não poderão permanecer nestes estados na etapa (n+1), pois apenas P_2,2 é nulo.