Abonnez-vous à Universalis pour 1 euro

APPRENTISSAGE PROFOND ou DEEP LEARNING

Rétropropagation de gradient

Réseau de neurones formels - crédits : Encyclopædia Universalis France

Réseau de neurones formels

Il a fallu attendre le début des années 1980 pour que des mathématiciens généralisent le principe d’apprentissage des perceptrons et conçoivent, en s’inspirant de principes mathématiques issus de la physique statistique, une procédure capable d’apprendre sur des réseaux de neurones à plusieurs couches. En termes techniques, on appelle cette procédure la rétropropagation du gradient. Quelques années plus tard, d’autres mathématiciens cherchèrent à déterminer les fondements théoriques de cet apprentissage avec, entre autres, la théorie statistique de l’apprentissage. Cela les conduisit à développer d’autres techniques d’apprentissage supervisé inspirées des principes mathématiques de l’apprentissage sur les réseaux de neurones formels, comme ce que l’on appelle les machines à vecteurs de support (support vectormachines) et les machines à noyaux (kernelmachines), qui furent bien souvent utilisées dans les années 1990 et au début des années 2000 pour effectuer de l’apprentissage supervisé dans de multiples champs d’applications comme la reconnaissance de caractères manuscrits, de visages ou de la parole.

La suite de cet article est accessible aux abonnés

  • Des contenus variés, complets et fiables
  • Accessible sur tous les écrans
  • Pas de publicité

Découvrez nos offres

Déjà abonné ? Se connecter

Écrit par

Classification

Pour citer cet article

Jean-Gabriel GANASCIA. APPRENTISSAGE PROFOND ou DEEP LEARNING [en ligne]. In Encyclopædia Universalis. Disponible sur : (consulté le )

Média

Réseau de neurones formels - crédits : Encyclopædia Universalis France

Réseau de neurones formels

Autres références

  • APPRENTISSAGE, psychologie

    • Écrit par Daniel GAONAC'H, Jean-François LE NY
    • 5 939 mots
    • 2 médias
    Ces recherches s’articulent maintenant avec celles qui, en intelligence artificielle, s’appuient sur l’exploitation d’un très grand nombre de données empiriques (big data) : plutôt que d’« instruire » la machine par des règles définies a priori, on cherche à ce que celle-ci se fonde, pour...
  • BIG DATA

    • Écrit par François PÊCHEUX
    • 6 148 mots
    • 3 médias
    ...les progrès réalisés dans le domaine de l’apprentissage automatique (machine learning), encore appelé apprentissage statistique, et de son extension, l’apprentissage profond (deeplearning), qui excelle dans la reconnaissance vocale, la reconnaissance d’images, ou encore le traitement automatique du...
  • EXPÉRIENCE (notions de base)

    • Écrit par Philippe GRANAROLO
    • 2 783 mots
    ...conduisent certains de nos contemporains à « humaniser » nos machines en leur prêtant la capacité d’acquérir de l’expérience ? L’apparition récente du deeplearning tend à rapprocher le fonctionnement mécanique du fonctionnement biologique. Prenons l’exemple de la reconnaissance des formes. Pour « apprendre...
  • INTELLIGENCE ARTIFICIELLE (IA)

    • Écrit par Jean-Gabriel GANASCIA
    • 5 584 mots
    • 5 médias
    ...réseaux de neurones formels, c’est-à-dire à des techniques relativement anciennes que l’on déploie aujourd’hui sur des architectures de dimensions beaucoup plus importantes qu’auparavant du fait de l’accroissement des capacités des machines. Cela correspond à ce que l’on appellel’apprentissage profond.
  • Afficher les 9 références

Voir aussi