TAILIEUCHUNG - Quá trình ngẫu nhiên và tính toán ngẫu nhiên phần 3

Tham khảo tài liệu 'quá trình ngẫu nhiên và tính toán ngẫu nhiên phần 3', khoa học tự nhiên, toán học phục vụ nhu cầu học tập, nghiên cứu và làm việc hiệu quả | 42 Chương 1. Quá trình Markov Trường hợp không gian trạng thái vô hạn đếm được Trong trường hợp không gian trạng thái E là vô hạn đếm được ta gặp những khó khăn về toán học khi muốn mở rộng các kết quả trong trường hợp hữu hạn. Ta có kết quả sau đây công nhận không chứng minh Định lý . 1 Với mọi i j giới hạn Pj 0 lim aij j tVô t j luôn tồn tại hữu hạn. 2 Với mỗi i giới hạn Pii 0 lim ----1 aii -ai Vi tVô t tồn tại nhưng có thể bằng vô cùng. Đối với trường hợp không gian trạng thái hữu hạn ta có M aij 0 hay j - ai. j i Trong trường hợp E vô hạn nói chung ta chỉ có bất đẳng thức sau ai Vi E E j i Thật vậy ta có Pij t 1 Pii t j i thành thử với mọi m n Pij t 1 Pii t . j 1 j i . Quá trình Markov 43 Chia hai vế cho t và đẩy t 0 ta thu được m aij ai. j 1 j i Cho m V ta thu được . Từ nay về sau ta chỉ xét các quá trình Markov thoả mãn điều kiện aij ai m. j i Ma trận vô số chiều A aij cũng được gọi là ma trận cực vi của quá trình đang xét. Định lý . Cho quá trình Markov với P t Pij t là họ các ma trận xác suất chuyển. Gọi A là ma trận cực vi của quá trình. Khi đó ta có P t P t A Pij t Pik t akj - pij y aj 1-18 và P t AP t Pj t aikPkj - Pij y ai k i Phương trình được gọi là phương trình thuận và phương trình được gọi là phương trình ngược Kolmogorov. Chứng minh. Ta chỉ chứng minh cho phương trình ngược còn thừa nhận sự đúng đắn của phương trình thuận vì chứng minh khá phức tạp về toán học. Ta có Pij s t - Pij t Pik s Pkj t - Pij t Pik s Pkj t Pii s - 1 Pij t k i 44 Chương 1. Quá trình Markov Với mỗi m cố định ta có m lim inf s-1 Pik s Pkj ì lim inf s-1 V Pik s Pkj ì s O s O k i k 1 k i m aik Pkj ì . k 1 k i Cho m V ta được liminf s V Pik s Pkj t V aikPkj t . s O J J k i k i Tiếp theo với m i ta có Pik s Pkj t Pk s Pkj t Ể Pik s k i k 1 k i m 1 mm Pik s Pkj ì l - Pii s - Pik sỴ Chia hai vế cho s và lấy lim sup ta thu đươc mm limsup s-1 2 Pik s Pkj t aikPkj t ai - aik s . s k i k 1 k i k 1 k i Cho m k và chú ý đến điều .

TỪ KHÓA LIÊN QUAN
TAILIEUCHUNG - Chia sẻ tài liệu không giới hạn
Địa chỉ : 444 Hoang Hoa Tham, Hanoi, Viet Nam
Website : tailieuchung.com
Email : tailieuchung20@gmail.com
Tailieuchung.com là thư viện tài liệu trực tuyến, nơi chia sẽ trao đổi hàng triệu tài liệu như luận văn đồ án, sách, giáo trình, đề thi.
Chúng tôi không chịu trách nhiệm liên quan đến các vấn đề bản quyền nội dung tài liệu được thành viên tự nguyện đăng tải lên, nếu phát hiện thấy tài liệu xấu hoặc tài liệu có bản quyền xin hãy email cho chúng tôi.
Đã phát hiện trình chặn quảng cáo AdBlock
Trang web này phụ thuộc vào doanh thu từ số lần hiển thị quảng cáo để tồn tại. Vui lòng tắt trình chặn quảng cáo của bạn hoặc tạm dừng tính năng chặn quảng cáo cho trang web này.