Théorie des chaînes de Markov finies et ses applications