ENTROPIE, théorie de l'information

COMMUNICATION

  • Écrit par 
  • Yves WINKIN
  •  • 4 805 mots

Dans le chapitre « Une théorie mathématique de la communication »  : […] Pendant la Seconde Guerre mondiale, nombre d'équipes de recherches civiles se constituent aux États-Unis autour de thématiques précises. C'est ainsi qu'un groupe de chercheurs se rassemble au Massachusetts Institute of Technology (M.I.T.) autour de Claude Shannon, un spécialiste des théories mathématiques de l'information, pour repenser la transmission télégraphique. Le télégraphe est en effet […] Lire la suite☛ http://www.universalis.fr/encyclopedie/communication/#i_13241

COMMUNICATION - Les processus de la communication

  • Écrit par 
  • Robert PAGÈS
  •  • 6 240 mots

Dans le chapitre « Les aspects informationnels »  : […] Cette assimilation au schéma informationnel est justifiée dans la mesure où, pour qu'il y ait communication, il faut nécessairement que les communicateurs (émetteur et récepteur) disposent de moyens d'information au sens physique et mathématique du mot, c'est-à-dire d'au moins deux éléments discriminables par un détecteur de différences (par exemple, un appareil perceptif humain ou encore une mach […] Lire la suite☛ http://www.universalis.fr/encyclopedie/communication-les-processus-de-la-communication/#i_13241

ENTROPIE

  • Écrit par 
  • Bernard DIU
  •  • 1 359 mots
  •  • 1 média

Dans le chapitre « L'entropie statistique »  : […] Intervient dans la formule de Boltzmann le nombre total W d'états microscopiques accessibles lorsque est fixé l'état macroscopique du système. Voilà qui est surprenant : on s'attendait plutôt à ce que l'un de ces états soit réalisé – même s'il est sans doute impossible de savoir lequel –, ce qui exclurait les autres. Ce dilemme est résolu si l'on admet que la description microscopique d'un système […] Lire la suite☛ http://www.universalis.fr/encyclopedie/entropie/#i_13241

INFORMATION THÉORIE DE L'

  • Écrit par 
  • Henri ATLAN, 
  • Jean-Paul DELAHAYE, 
  • Étienne KLEIN
  •  • 3 074 mots

Dans le chapitre « Théorie de Shannon »  : […] Lorsque le but poursuivi est de transmettre une chaîne de caractère s à un récepteur disposant de la connaissance des fréquences p ( i ) des lettres de l'alphabet { a 1 ,  a 2 , ...,  a n }, on définira la valeur en information de […] Lire la suite☛ http://www.universalis.fr/encyclopedie/theorie-de-l-information/#i_13241

SHANNON CLAUDE ELWOOD (1916-2001)

  • Écrit par 
  • Frédéric GAUTHIER
  •  • 909 mots
  •  • 1 média

Né le 30 avril 1916 à Gaylord (Michigan, États-Unis), Claude Elwood Shannon est considéré par l'ensemble de la communauté scientifique comme le père fondateur de la théorie de l'information et des communications numériques. En 1940, il obtient un master en ingénierie électrique et un doctorat en mathématique du Massachusetts Institute of Technology (M.I.T.). Pour son […] Lire la suite☛ http://www.universalis.fr/encyclopedie/claude-elwood-shannon/#i_13241