... đếm đợc. E là không gian trạng thái mà các phần tử của nó ký hiệu là i, j, k, (có chỉ số hoặc không) . Khi đó, tính Markov và tính thuần nhất của (Xn); n = 0, 1, 2 có nghĩa là:Pij = P (Xn ... nếu (n) không phụ thuộc n, tức là = (n) hay là = . P (do tính chất (1)).Vậy mô hình của một xích Markov rời rạc và thuần nhất là bộ ba (Xn, , P), trong đó:(Xn): dãy các đại lợng ... thái). Luận văn đề cập đến một số tính chất của quá trình Markov (trình bày ở chơng 3).Luận văn gồm 3 chơng:Chơng 1: Một số kiến thức chuẩn bịChơng 2: Xích Markov với thời gian rời rạcChơng 3:...