#Components Markova lēmumu procesa
Stāvokļi (S):
Pārstāv visas iespējamās situācijas, kurās aģents var atrasties.
Piemērs
#OpenfabricA I: Tirdzniecības bota pašreizējais statuss, kas uzrauga akciju cenas, vai čatbota, kas seko lietotāja sarunu plūsmai.
Darbības (A):
Visas iespējamās darbības, kuras aģents var veikt katrā stāvoklī.
Piemērs: Ieteikumu dzinējs, kas izvēlas produktu, ko ieteikt, pamatojoties uz lietotāja vēlmēm.
Pārejas varbūtības (P):
Varbūtība pāriet no viena stāvokļa uz citu.