lesson/forelesning

Forrige gang (4. og 5. feb.) innførte vi Markovkjeder i diskret tid. Se kap.1.1 i boken til J. Norris. Deretter drøftet vi Markovegenskapen og (n-step-) overgangssannsynligheter av Markovkjeder (kap. 1.1 i Norris). Neste gang (11. og 12. feb.) vil vi diskutere karakterisering av Markovtilstander via kommuniserende klasser og beregne treffetid-sannsynligheter i forbindelse med "gambler`s ruin" og "birth-and-death-chains" (kap. 1.2 og 1.3 i Norris).

Det blir fellesundervisning (Exercises 1) på fredag, 6. feb.

Last time (Feb. 4 and 5) we introduced Markov chains in discrete time. See chapter 1.1 in the book by J. Norris. Then we discussed the Markov property and n-step transition probabilities of Markov chains (chap. 1.1 in Norris).

Next time (Feb. 11 and 12) we will discuss characterization of Markov states via communicating classes and compute hitting time probabilities in connection with "gambler`s ruin" and "birth-and-death chains" (Chapters 1.2 and 1.3 in Norris).

There will be a joint class (Exercises 1) on Friday, Feb. 6.