Markov

Definition

Em inteligência artificial e teoria das probabilidades, os processos de Markov são modelos fundamentais usados para descrever sistemas que transitam aleatoriamente entre estados. O princípio central é a propriedade de Markov, que afirma que o futuro é independente do passado dado o presente.

Summary

Markov refere-se a processos estocásticos onde o estado futuro depende apenas do estado atual, aderindo à propriedade de Markov de ausência de memória.

Key Concepts

• Propriedade de Markov
• Ausência de Memória
• Transição de Estado
• Processo Estocástico

Use Cases

• Agentes de aprendizado por reforço
• Geração de linguagem natural
• Sistemas de manutenção preditiva

Related Terms

• Hidden Markov Model (Modelo Oculto de Markov)
• MDP (Processo de Decisão de Markov)
• Bayesian Network (Rede Bayesiana)
• Transition Matrix (Matriz de Transição)