we consider a stochastic process {X,n=0,1,2,..} that takes on a finite or countable number of possible values.
Unless otherwise mentioned, this set of possible values of the process will be denoted by the set of nonnegative integers {0,1,2...}.
if X = i, then the process is said to be in state i at time n.
we suppose that whenever the process i in state i, there is a fixed probability P that it will next be in state j.
this is, we suppose that
เราพิจารณากระบวนการแบบเฟ้นสุ่ม { X, n = 0, 1, 2, ... } ซึ่งใช้จำนวนค่าที่เป็นไปได้แน่นอน หรือนับได้ เว้นแต่ระบุไว้เป็นอย่างอื่น ชุดของค่าที่เป็นไปได้ของกระบวนการนี้จะแทน ด้วยชุดของจำนวนเต็ม nonnegative {0,1,2...} ถ้า X =, แล้วการกล่าวอย่างภาคภูมิฉันเวลา nเราสมมติว่า เมื่อกระบวนการฉันในรัฐฉัน มีเป็นถาวร P ที่ถัดไปนั้นจะอยู่ในสถานะเจเป็น เราสมมติว่า
การแปล กรุณารอสักครู่..

เราพิจารณากระบวนการสุ่ม {X, n = 0,1,2, .. } ว่าจะใช้เวลาในจำนวน จำกัด หรือนับได้ของค่าที่เป็นไปได้.
เว้นแต่ระบุไว้ชุดของค่าที่เป็นไปของกระบวนการนี้จะถูกแทนด้วยชุดของ จำนวนเต็ม nonnegative {0,1,2} ... .
ถ้า X = I, แล้วกระบวนการมีการกล่าวถึงอยู่ในสภาพที่ฉัน n เวลา.
เราคิดว่าเมื่อใดก็ตามที่ฉันกระบวนการในรัฐฉันมีความน่าจะเป็น P คงที่ มันต่อไปจะเป็นในรัฐเจ.
นี้คือเราคิดว่า
การแปล กรุณารอสักครู่..
