Les processus stochastiques permettent de modéliser des systèmes dont le comportement n'est que partiellement prévisible. La théorie est fondée sur le calcul de probabilités et statistiques qu'il nous faut expliciter avant de définir le modèle markovien.