Share to: share facebook share twitter share wa share telegram print page

 

Inégalité de Chernoff

En théorie des probabilités, l'inégalité de Chernoff permet de majorer la queue d'une loi de probabilité, c'est-à-dire qu'elle donne une valeur maximale de la probabilité qu'une variable aléatoire dépasse une valeur fixée. On parle également de borne de Chernoff. Elle est nommée ainsi en l'honneur du mathématicien Herman Chernoff.

Il s'agit d'une inégalité de concentration, c'est-à-dire que cette inégalité fournit des bornes sur la probabilité qu'une variable aléatoire dévie d'une certaine valeur[1].

Énoncés

Il existe de nombreux énoncés, et de nombreux cas particuliers.

Cas général

Soit une variable aléatoire réelle dont la fonction génératrice des moments est telle que, pour un certain réel ,

Alors[2], pour tout , l'inégalité de Markov appliquée à la variable aléatoire stipule que [3]

et

Avec des variables symétriques et une espérance nulle

Soient des variables aléatoires indépendantes, telles que et pour tout i. On pose et on appelle σ2 la variance de X.

Alors, on a pour tout :

ainsi que ,
et donc aussi .

Avec des variables symétriques booléennes

Soient des variables aléatoires booléennes (i.e. à valeurs dans ) indépendantes, de même espérance p, alors ,

, et .

Démonstration

Il existe plusieurs manières de démontrer ces inégalités[4].

Cas général

Avec des variables symétriques booléennes

Applications

Ces inégalités sont très utilisées en informatique théorique, notamment en théorie de la complexité et en algorithmique, où elles permettent de prouver des résultats sur les algorithmes probabilistes.

Voir aussi théorie des grandes déviations.

Extensions

On peut écrire des généralisations intéressantes pour les matrices aléatoires, appelées en anglais matrix Chernoff bound (en)[5].

Références

  1. (en) Boucheron, Stéphane, Lugosi, Gábor et Massart, Pascal, « Concentration Inequalities: A Nonasymptotic Theory of Independence », OUP Academic,‎ (DOI 10.1093/acprof:o, lire en ligne, consulté le )
  2. Brémaud 2009, p. 184
  3. (en) Jean-François Le Gall, Measure Theory, Probability, and Stochastic Processes, vol. 295, Springer International Publishing, coll. « Graduate Texts in Mathematics », (ISBN 978-3-031-14204-8 et 978-3-031-14205-5, DOI 10.1007/978-3-031-14205-5, lire en ligne)
  4. Wolfgang Mulzer, « Five Proofs of Chernoff’s Bound with Applications », Bulletin of the EATCS, no 124,‎ (lire en ligne).
  5. Joel A Tropp, « User-friendly tail bounds for sums of random matrices », Foundations of Computational Mathematics, vol. 12, no 4,‎ , p. 389-434

Voir aussi

Bibliographie

Information related to Inégalité de Chernoff

Prefix: a b c d e f g h i j k l m n o p q r s t u v w x y z 0 1 2 3 4 5 6 7 8 9

Portal di Ensiklopedia Dunia

Kembali kehalaman sebelumnya