Claude Shannon

Les parents de Claude Shannon étaient Claude Elwood Shannon et Mabel Catherine Wolf[2].

Il étudie le génie électrique et les mathématiques à l'université du Michigan dont il est diplômé en 1936[2]. Il utilise notamment l'algèbre de Boole pour sa maîtrise soutenue en 1938 au Massachusetts Institute of Technology (MIT). Il y explique comment construire des machines à relais en utilisant l'algèbre de Boole pour décrire l'état des relais (1 : fermé, 0 : ouvert)^{[réf. souhaitée]}. Il obtient un PhD en mathématiques au MIT en 1940[2].

Shannon travaille vingt ans au MIT, de 1958 à 1978. Parallèlement à ses activités académiques, il travaille aussi aux laboratoires Bell de 1941 à 1972[2].

En 1949 il se marie avec Mary Elizabeth Moore, avec qui il aura trois enfants[2].

Souffrant de la maladie d'Alzheimer dans les dernières années de sa vie, Claude Shannon est mort à 84 ans le 24 février 2001 à Medford dans le Massachusetts[2].

Claude Shannon est connu non seulement pour ses travaux dans les télécommunications, mais aussi pour l'étendue et l'originalité de ses hobbies, comme la jonglerie, la pratique du monocycle et l'invention de machines farfelues : une souris mécanique sachant trouver son chemin dans un labyrinthe, un robot jongleur, un joueur d'échecs (roi tour contre roi), etc.

L'un de ces « gadgets » présente toutefois un grand intérêt conceptuel, comme le montrent Philippe Boulanger et Alain Cohen dans Le Trésor des paradoxes (Éditions Belin, 2007) : « Claude Shannon voulut élaborer une « machine inutile », sans finalité : on la met en marche en appuyant, comme sur tout dispositif électromécanique, sur une touche « on » ; mais les choses prennent alors une tournure surprenante, car cette mise sous tension déclenche un mécanisme provoquant aussitôt l’arrêt du gadget en mettant l’interrupteur sur « off ».

Modèle de Shannon - Communication.

Pour décrire la communication entre machines, l'article de 1948 et le livre de 1949 commencent tous deux par un « schéma », appelé schéma de Shannon ou modèle de Shannon et Weaver. Le schéma modélise la communication entre machines :

Ce schéma est la traduction « civile » d'un schéma préalable, utilisé dans le contexte militaire :

source → encodeur → signal → décodeur → destinataire, dans un contexte de brouillage.

Conçu pour décrire la communication entre machines, ce schéma modélise imparfaitement la communication humaine^{[réf. nécessaire]}. Pourtant, son succès est foudroyant^{[réf. nécessaire]}, et il a participé largement à la création d'un champ disciplinaire : les SIC. Shannon s'étonna de ce phénomène et s'en dissocia^{[réf. nécessaire]}. L'une des explications de ce succès est le fait qu'il se fond parfaitement dans une approche béhavioriste des médias. De plus, ce schéma dit canonique donne une cohérence et une apparence de scientificité.

Dans l'article comme dans son livre, Claude Shannon popularise l'utilisation du mot bit comme mesure élémentaire de l'information numérique. John Tukey fut néanmoins le premier à utiliser le terme[3]. Plus précisément, le bit désigne un chiffre binaire permettant de coder une quantité d'information. Ainsi, il faut au moins un bit (ou 1 Shannon^{[réf. nécessaire]}) pour coder deux états (par exemple « pile » et « face », ou plus généralement 0 et 1) et deux bits permettent de coder quatre états (00, 01, 10, 11). Les 26 lettres de l'alphabet nécessitent au minimum 5 bits car : ${\displaystyle (2^{4}=16)<26\leq (2^{5}=32)}$

Plus généralement, si P est le nombre d'états possibles, le nombre de bits minimum n nécessaire pour les coder tous vérifie :

${\displaystyle 2^{(n-1)}<P\leq 2^{n}}$ (autrement dit, n est le plafond du logarithme binaire de P : ${\displaystyle n=\lceil log_{2}P\rceil }$)

Dans un cas idéal où toute l'information disponible est utilisée, ${\displaystyle P=2^{n}}$.

Dans le domaine des télécommunications, la relation de Shannon permet de calculer la valence (ou nombre maximal d'états) en milieu perturbé :

Soit S la puissance du signal, N la puissance du bruit :

${\displaystyle n={\sqrt {1+{\frac {S}{N}}}}}$

On a alors le débit maximal d'un canal de communication de bande passante H :

${\displaystyle \displaystyle H{\log }_{2}(1+{\frac {S}{N}})}$

Ce résultat est indépendant de la vitesse d'échantillonnage et du nombre de niveaux d'un échantillon (la valence).

Un apport essentiel des travaux de Shannon concerne la notion d'entropie. Si l'on considère N événements de probabilité p₁, p₂… p_N, indépendants les uns des autres, alors leur entropie de Shannon est définie comme :

Entropie = ${\displaystyle -\sum _{i=1}^{N}p_{i}\log _{2}(p_{i})}$

Il a par ailleurs :

• établi un rapport entre augmentation d'entropie et gain d'information ;
• montré l'équivalence de cette notion avec l’entropie de Ludwig Boltzmann en thermodynamique.

La découverte du concept ouvrait ainsi la voie aux méthodes dites d'entropie maximale (voir probabilité), donc au scanner médical, à la reconnaissance automatique des caractères et à l'apprentissage automatique.

Son nom est associé à plusieurs théorèmes, le théorème d'échantillonnage de Nyquist-Shannon sur l'échantillonnage (aussi appelé critère de Shannon), le premier théorème de Shannon sur la limite théorique de la compression, le deuxième théorème de Shannon sur la capacité d'un canal de transmission.

En 1981, Claude Shannon a commencé à écrire un article intitulé Scientific Aspects of Juggling, sur l'art de la jonglerie. Cet article était prévu pour être publié dans Scientific American, mais ce ne fut finalement pas le cas. Néanmoins, cette ébauche a servi de base à la formalisation des mouvements de jonglerie par le siteswap[4].

Au jeu d'échecs, il a estimé le nombre de parties différentes possibles ayant un sens échiquéen (nombre à distinguer du nombre, beaucoup plus élevé, de parties possibles que permettent les règles du jeu). Ce nombre est estimé à 10¹²⁰ et porte le nom de nombre de Shannon.

• Théorème d'échantillonnage de Nyquist-Shannon
• Théorie de l'information
• A Mathematical Theory of Communication
• Communication
• Message (communication)
• Inférence bayésienne
• Cybernétique
• Norbert Wiener
• Nombre de Shannon

• Mattelart A. et Mattelart M., Histoire des théories de la communication, 3^e édition, Éditions La Découverte, Paris, 2004
• Claude E. Shannon, A Symbolic Analysis of Relay and Switching Circuits, Thesis (M.S.), Massachusetts Institute of Technology, Dept. of Electrical Engineering, 1940 (lire)
• Claude E. Shannon, A Mathematical Theory of Communication, Bell System Technical Journal, vol. 27, p. 379-423 and 623-656, July and October, 1948 (ISBN 0252725484) (lire [PDF])
• Claude E. Shannon, Communication Theory of Secrecy Systems, Bell System Technical Journal, Vol 28, p. 656-715, Oct 1949. (lire)
• Claude E. Shannon et Warren Weaver, The Mathematical Theory of Communication, The University of Illinois Press, Urbana, Illinois, 1949. (ISBN 0-252-72548-4). Trad. fr. Claude Shannon and Warren Weaver: La théorie mathématique de la communication, Cassini, Paris, 2018. (ISBN 978-2-84225-222-9)

• Notices d'autorité :

  • Fichier d’autorité international virtuel
  • International Standard Name Identifier
  • CiNii
  • Bibliothèque nationale de France (données)
  • Système universitaire de documentation
  • Bibliothèque du Congrès
  • Gemeinsame Normdatei
  • Bibliothèque nationale de la Diète
  • Bibliothèque nationale d’Espagne
  • Bibliothèque royale des Pays-Bas
  • Bibliothèque nationale de Pologne
  • Bibliothèque nationale d’Israël
  • Bibliothèque universitaire de Pologne
  • Bibliothèque nationale de Catalogne
  • Bibliothèque nationale d’Australie
  • Bibliothèque nationale tchèque
  • Bibliothèque nationale de Grèce
  • Bibliothèque nationale de Corée
  • WorldCat
• Ressources relatives à la recherche :
  • Google Scholar
  • (en) Digital Bibliography & Library Project
  • (en) Mathematics Genealogy Project
  • (en + ja + zh-Hans + zh-Hant + ru) Scopus
• Creative Thinking, Claude Shannon aux Bell Lab. 20 mars 1952

• Portail de l’informatique
• Portail de l'informatique théorique
• Portail des télécommunications
• Portail des États-Unis
• Portail du XX^e siècle