Markovi otsustusprotsess (MDP)

Autor: Laura McKinney
Loomise Kuupäev: 5 Aprill 2021
Värskenduse Kuupäev: 22 Juunis 2024
Anonim
Markovi otsustusprotsess (MDP) - Tehnoloogia
Markovi otsustusprotsess (MDP) - Tehnoloogia

Sisu

Definitsioon - mida tähendab Markovi otsustusprotsess (MDP)?

Markovi otsustusprotsess (MDP) on asi, mida spetsialistid nimetavad „diskreetse ajaliselt stohhastiliseks kontrolliprotsessiks”. See põhineb matemaatikal, mille teerajajaks oli vene akadeemik Andrey Markov 19. sajandi lõpus ja 20. sajandi alguses.


Sissejuhatus Microsoft Azure'i ja Microsoft Cloud | Kogu selle juhendi kaudu saate teada, mis on pilvandmetöötlus ja kuidas Microsoft Azure aitab teil pilvest rännata ja oma ettevõtet juhtida.

Techopedia selgitab Markovi otsustusprotsessi (MDP)

Üks viis Markovi otsustusprotsessi ja sellega seotud Markovi ahelate selgitamiseks on see, et need on moodsa mängu teooria elemendid, millele eeldas sada aastat tagasi vene teadlase lihtsam matemaatiline uurimistöö. Markovi otsustusprotsessi kirjeldus seisneb selles, et see uurib stsenaariumi, kus süsteem on mõnes antud olekute kogumis, ja liigub otsustaja otsuste põhjal edasi teise olekusse.

Markovi ahel kui mudel näitab sündmuste jada, kus konkreetse sündmuse tõenäosus sõltub eelnevalt saavutatud olekust. Spetsialistid võivad Markovi otsustusprotsessi kirjeldamisel rääkida “loendatavast olekuruumist” - mõned seostavad Markovi otsustusmudeli idee “juhusliku jalutuskäigu” mudeli või mõne muu tõenäosustel põhineva stohhastilise mudeliga (juhusliku kõndimise mudel, mida sageli viidatakse Wall Tänav, modelleerib omakapitali liikumist turu tõenäosuse korral üles või alla).


Üldiselt rakendatakse Markovi otsustusprotsesse sageli mõne keerukama tehnoloogia osas, mille kallal spetsialistid täna töötavad, näiteks robootika, automaatika ja uurimismudelite osas.