12
Communication homme-machine, Interaction, cerveau et sciences cognitives François Cabestaing Laboratoire d’Automatique, Génie Informatique & Signal - UMR8146 Université des Sciences et Technologies de Lille Les 50 ans de l’Intelligence Artificielle vendredi 3 novembre 2006 François Cabestaing CHM, Interaction, cerveau et sciences cognitives

Laboratoire de Recherche en Informatique - Communication homme-machine, Interaction ...sebag/AFIA/Cabestaing.pdf · 2006. 11. 7. · Communication homme-machine, Interaction, cerveau

  • Upload
    others

  • View
    1

  • Download
    0

Embed Size (px)

Citation preview

Page 1: Laboratoire de Recherche en Informatique - Communication homme-machine, Interaction ...sebag/AFIA/Cabestaing.pdf · 2006. 11. 7. · Communication homme-machine, Interaction, cerveau

Communication homme-machine, Interaction, cerveauet sciences cognitives

François Cabestaing

Laboratoire d’Automatique, Génie Informatique & Signal - UMR8146Université des Sciences et Technologies de Lille

Les 50 ans de l’Intelligence Artificiellevendredi 3 novembre 2006

François Cabestaing CHM, Interaction, cerveau et sciences cognitives

Page 2: Laboratoire de Recherche en Informatique - Communication homme-machine, Interaction ...sebag/AFIA/Cabestaing.pdf · 2006. 11. 7. · Communication homme-machine, Interaction, cerveau

Evolution des interfaces homme-machine

Caractéristiques des IHM

Débits d’informations : descendant (M vers H), montant (H vers M)

Ergonomie : facilité d’utilisation, apprentissage, fatigue

Accessibilité : age, handicap moteur ou mental

Evolution des interfaces, flux montant

Actions mécaniques : clavier, souris, trackball, etc...

Sans contact : commande vocale, suivi du regard, etc...

Directe : neuroprothèses, interfaces cerveau-machine

BCI (Brain-Computer Interfaces), BMI (Brain-Machine Interface)

Premières expérimentations dans le milieu des années 80

6 labos en 1994 (monde), 38 en 1999, +150 en 2005, environ 10 enFrance en 2006...

Les 50 ans de l’Intelligence Artificielle, 3 novembre 2006 CHM, Interaction, cerveau et sciences cognitives

Page 3: Laboratoire de Recherche en Informatique - Communication homme-machine, Interaction ...sebag/AFIA/Cabestaing.pdf · 2006. 11. 7. · Communication homme-machine, Interaction, cerveau

Structure d’une Interface Cerveau-Ordinateur

Acquisitionet

Traitement

Classificationet

Traduction

signaux features commandes feedback

Les 50 ans de l’Intelligence Artificielle, 3 novembre 2006 CHM, Interaction, cerveau et sciences cognitives

Page 4: Laboratoire de Recherche en Informatique - Communication homme-machine, Interaction ...sebag/AFIA/Cabestaing.pdf · 2006. 11. 7. · Communication homme-machine, Interaction, cerveau

Acquisition des signaux (1/3)

Electrodes implantées

Électrodes implantées dans le cortex

Résolution spatiale excellente, groupesde neurones

Méthode invasive, implantation trèsdélicate

Stabilité et longévité correctes,enregistrements sur plusieurs mois

Les 50 ans de l’Intelligence Artificielle, 3 novembre 2006 CHM, Interaction, cerveau et sciences cognitives

Page 5: Laboratoire de Recherche en Informatique - Communication homme-machine, Interaction ...sebag/AFIA/Cabestaing.pdf · 2006. 11. 7. · Communication homme-machine, Interaction, cerveau

Acquisition des signaux (2/3)

ECoG : Électro-corticogramme

Grille d’électrodes posées à la surface ducortex

Résolution spatiale moyenne, de l’ordrede quelques millimètres

Méthode invasive, mais sécurité bienmaîtrisée de nos jours

Stabilité et longévité correctes,enregistrements sur plusieurs mois

Les 50 ans de l’Intelligence Artificielle, 3 novembre 2006 CHM, Interaction, cerveau et sciences cognitives

Page 6: Laboratoire de Recherche en Informatique - Communication homme-machine, Interaction ...sebag/AFIA/Cabestaing.pdf · 2006. 11. 7. · Communication homme-machine, Interaction, cerveau

Acquisition des signaux (3/3)

EEG : Électro-encéphalogramme

Ensemble d’électrodes placées sur le cuirchevelu

Résolution spatiale faible, de l’ordre ducentimètre dans le meilleur des cas

Sécurité élevée, méthode non invasive

Stabilité et longévité médiocres, difficultéd’utilisation sur des périodes prolongées

Les 50 ans de l’Intelligence Artificielle, 3 novembre 2006 CHM, Interaction, cerveau et sciences cognitives

Page 7: Laboratoire de Recherche en Informatique - Communication homme-machine, Interaction ...sebag/AFIA/Cabestaing.pdf · 2006. 11. 7. · Communication homme-machine, Interaction, cerveau

BCI utilisant le potentiel évoqué par un stimulus

Potentiel évoqué auditif

Stimulus : impulsions auditives

Latence : 30-80 ms

Potentiel évoqué visuel

Stimulus : damier clignotant

Latence : 100-150 ms

P300, cognitif

Stimulus + action cognitive

Latence : 300-500 ms

Les 50 ans de l’Intelligence Artificielle, 3 novembre 2006 CHM, Interaction, cerveau et sciences cognitives

Page 8: Laboratoire de Recherche en Informatique - Communication homme-machine, Interaction ...sebag/AFIA/Cabestaing.pdf · 2006. 11. 7. · Communication homme-machine, Interaction, cerveau

BCI utilisant le potentiel évoqué par un stimulus

Potentiel évoqué auditif

Stimulus : impulsions auditives

Latence : 30-80 ms

Potentiel évoqué visuel

Stimulus : damier clignotant

Latence : 100-150 ms

P300, cognitif

Stimulus + action cognitive

Latence : 300-500 ms

Les 50 ans de l’Intelligence Artificielle, 3 novembre 2006 CHM, Interaction, cerveau et sciences cognitives

Page 9: Laboratoire de Recherche en Informatique - Communication homme-machine, Interaction ...sebag/AFIA/Cabestaing.pdf · 2006. 11. 7. · Communication homme-machine, Interaction, cerveau

BCI utilisant le potentiel évoqué par un stimulus

1, 2, ...

Potentiel évoqué auditif

Stimulus : impulsions auditives

Latence : 30-80 ms

Potentiel évoqué visuel

Stimulus : damier clignotant

Latence : 100-150 ms

P300, cognitif

Stimulus + action cognitive

Latence : 300-500 ms

Les 50 ans de l’Intelligence Artificielle, 3 novembre 2006 CHM, Interaction, cerveau et sciences cognitives

Page 10: Laboratoire de Recherche en Informatique - Communication homme-machine, Interaction ...sebag/AFIA/Cabestaing.pdf · 2006. 11. 7. · Communication homme-machine, Interaction, cerveau

BCI par contrôle des rythmes cérébraux (bio-feedback)

Extraction d’un signal

Signal simple ou composé

Filtré, transformé

Affichage compréhensif

Visuellement simple

Temps-réel

Apprentissage

Contrôle grâce au feedback

Long mais efficace

Les 50 ans de l’Intelligence Artificielle, 3 novembre 2006 CHM, Interaction, cerveau et sciences cognitives

Page 11: Laboratoire de Recherche en Informatique - Communication homme-machine, Interaction ...sebag/AFIA/Cabestaing.pdf · 2006. 11. 7. · Communication homme-machine, Interaction, cerveau

Les BCI et l’Intelligence Artificielle (1/2)

Que peut apporter l’IA au développement de BCI efficaces ?

Apprentissage : interaction entre deux systèmes adaptatifs

L’utilisateur, qui apprend à maîtriser le système

L’interface, qui s’adapte aux caractéristiques de l’utilisateur

Assez complexe lorsque les deux apprentissages sont simultanés

L’apport de l’IA dans ce contexte

Apprentissage efficace, intégrant une constante remise à jour(Machine Learning)

Reconnaissance d’éléments caractéristiques dans les signaux(Pattern Recognition)

Modélisation des connaissances, l’individu étant considéré entant que "grand système"

Les 50 ans de l’Intelligence Artificielle, 3 novembre 2006 CHM, Interaction, cerveau et sciences cognitives

Page 12: Laboratoire de Recherche en Informatique - Communication homme-machine, Interaction ...sebag/AFIA/Cabestaing.pdf · 2006. 11. 7. · Communication homme-machine, Interaction, cerveau

Les BCI et l’Intelligence Artificielle (2/2)

Que peuvent apporter les BCI à l’IA ?

Augmentation du débit d’informations (flux montant)

1990 : environ 5 bits par minute

2005 : BrainGate, contrôle 2D d’un curseur et validation, soitl’équivalent d’une souris : 10 bits par seconde

Peut-on imaginer que le débit autorisé par les BCI suivra une loi deMoore ?

Une autre modalité de communication

Interface "rapide", pouvant communiquer rapidement au systèmeles réactions de l’individu

Prise en compte directe d’autres paramètres intervenant dans lacommunication (émotions, fatigue)

Les 50 ans de l’Intelligence Artificielle, 3 novembre 2006 CHM, Interaction, cerveau et sciences cognitives