Première partie: Chaînes de Markov - 1. Chaînes de Markov sur un ensemble fini - 2. Chaînes de Markov sur un ensemble dénombrable - 3. Application aux algorithmes MCMC - Deuxième partie: Processus de sauts et files d'attente - 4. Rappels de probabilités - 5. Le processus ponctuel de Poisson - 6. Processus markoviens de sauts - 7. Files d'attente - Appendice: Solutions d'exercices.