Rantai Markov adalah proses stokastik yang menggambarkan urutan barisan yang mungkin di mana probabilitas setiap kejadian hanya bergantung pada keadaan yang dicapai pada kejadian sebelumnya.[1][2][3] Urutan tak terbatas yang dapat dihitung, di mana rantai bergerak pada langkah waktu diskrit, memberikan rantai Markov waktu diskrit (DTMC). Proses waktu kontinu disebut rantai Markov waktu kontinu (CTMC). Ini dinamai ahli matematika Rusia Andrei Markov.

Rantai Markov memiliki banyak aplikasi sebagai model statistik dari proses dunia nyata,,[1][4][5][6] seperti mempelajari sistem kendali jelajah pada kendaraan bermotor, antrian atau antrian pelanggan yang tiba di bandara, nilai tukar mata uang dan dinamika populasi hewan.

Proses Markov adalah dasar untuk metode simulasi stokastik umum yang dikenal sebagai rantai Markov Monte Carlo, yang digunakan untuk menyimulasikan pengambilan sampel dari distribusi probabilitas yang kompleks, dan telah menemukan aplikasi dalam statistik Bayesian, termodinamika, mekanika statistik, fisika, kimia, ekonomi, keuangan, sinyal pemrosesan, teori informasi, dan pemrosesan ucapan.

Referensi

sunting
  1. ^ a b Gagniuc, Paul A. (2017). Markov Chains: From Theory to Implementation and Experimentation. USA, NJ: John Wiley & Sons. hlm.ย 1โ€“235. ISBNย 978-1-119-38755-8.
  2. ^ "Markov chain | Definition of Markov chain in US English by Oxford Dictionaries". Oxford Dictionaries | English. Diarsipkan dari asli tanggal 2017-12-15. Diakses tanggal 2017-12-14.
  3. ^ Definition at Brilliant.org "Brilliant Math and Science Wiki". Retrieved on 12 May 2019
  4. ^ Samuel Karlin; Howard E. Taylor (2 December 2012). A First Course in Stochastic Processes. Academic Press. hlm.ย 47. ISBNย 978-0-08-057041-9. Diarsipkan dari versi aslinya tanggal 23 March 2017.
  5. ^ Bruce Hajek (12 March 2015). Random Processes for Engineers. Cambridge University Press. ISBNย 978-1-316-24124-0. Diarsipkan dari versi aslinya tanggal 23 March 2017.
  6. ^ G. Latouche; V. Ramaswami (1 January 1999). Introduction to Matrix Analytic Methods in Stochastic Modeling. SIAM. hlm.ย 4โ€“. ISBNย 978-0-89871-425-8. Diarsipkan dari versi aslinya tanggal 23 March 2017.

Pranala luar

sunting


๐Ÿ“š Artikel Terkait di Wikipedia

Matriks stokastik

terjadi pada rantai Markov. Matriks ini juga dikenal dengan sebutan matriks probabilitas, matriks transisi, matriks subtitusi, dan matriks Markov. Setiap entri

Model Markov tersembunyi

Model Markov Tersembunyi atau lebih dikenal sebagai Hidden Markov Model (HMM) adalah sebuah model statistik dari sebuah sistem yang diasumsikan sebuah

Daftar topik probabilitas

Rantai Markov Contoh rantai Markov Imbangan terperinci Sifat Markov Model Markov tersembunyi Model Markov entropi maksimum Waktu pencampuran rantai Markov

Nilai harapan

Variabel acak Proses Bernoulli Kontinu atau diskrit Nilai harapan Varians Rantai Markov Langkah acak Proses stokastik Kejadian komplemen Peluang bersama Peluang

Analisis numerik

penting dalam psikologi kuantitatif. Persamaan diferensial stokastik dan rantai Markov penting dalam menyimulasikan sel hidup dalam kedokteran dan biologi

Kecerdasan buatan generatif

yang dihasilkan secara algoritmis dapat ditelusuri pada pengembangan rantai Markov, sebuah metode pemodelan bahasa alami yang telah digunakan sejak awal

Statistika komputasi

secara komputasi, di dalamnya termasuk metode resampling (statistik), rantai Markov Monte Carlo, regresi lokal, estimasi densitas kernel, jaringan syaraf

Rusia

Lyapunov, yang menemukan teori stabilitas modern, dan Andrey Markov yang menemukan rantai Markov. Pada abad ke-20, matematikawan Soviet seperti Andrey Kolmogorov