Self-supervised representation learning from electroencephalography signals - CEA - Commissariat à l’énergie atomique et aux énergies alternatives Accéder directement au contenu
Communication Dans Un Congrès Année : 2019

Self-supervised representation learning from electroencephalography signals

Apprentissage de représentations auto-supervisé à partir de signaux d'électroencéphalographie

Résumé

The supervised learning paradigm is limited by the cost - and sometimes the impracticality - of data collection and labeling in multiple domains. Self-supervised learning, a paradigm which exploits the structure of unlabeled data to create learning problems that can be solved with standard supervised approaches, has shown great promise as a pretraining or feature learning approach in fields like computer vision and time series processing. In this work, we present self-supervision strategies that can be used to learn informative representations from multivariate time series. One successful approach relies on predicting whether time windows are sampled from the same temporal context or not. As demonstrated on a clinically relevant task (sleep scoring) and with two electroencephalography datasets, our approach outperforms a purely supervised approach in low data regimes, while capturing important physiological information without any access to labels.
Le paradigme de l’apprentissage supervisé est limité par le coût - et parfois l’impraticabilité - de la collecte de données et de l’étiquetage dans de multiples domaines. L'apprentissage auto-supervisé, un paradigme qui exploite la structure de données non étiquetées pour créer des problèmes d'apprentissage qui peuvent être résolus avec des approches supervisées standard, s'est révélé très prometteur en tant qu'approche de pré-entraînement ou d'apprentissage de traits caractéristiques dans des domaines tels que la vision par ordinateur et le traitement de séries temporelles. Dans ce travail, nous présentons des stratégies d'auto-supervision pouvant être utilisées pour apprendre des représentations informatives à partir de séries temporelles multivariées. Une approche fructueuse consiste à prédire si des fenêtres temporelles sont échantillonnées dans le même contexte temporel ou non. Comme le démontre une tâche cliniquement pertinente (classification des stades du sommeil) et avec deux jeux de données d'électroencéphalographie, notre approche surpasse une approche purement supervisée dans des régimes de données faibles, tout en capturant des informations physiologiques importantes sans accès aux étiquettes.
Fichier principal
Vignette du fichier
main.pdf (1.15 Mo) Télécharger le fichier
Origine : Fichiers éditeurs autorisés sur une archive ouverte
Loading...

Dates et versions

hal-02361350 , version 1 (13-11-2019)

Identifiants

  • HAL Id : hal-02361350 , version 1

Citer

Hubert Banville, Isabela Albuquerque, Aapo Hyvärinen, Graeme Moffat, Denis-Alexander Engemann, et al.. Self-supervised representation learning from electroencephalography signals. MLSP 2019 - IEEE 29th International Workshop on Machine Learning for Signal Processing, Oct 2019, Pittsburgh, United States. ⟨hal-02361350⟩
174 Consultations
757 Téléchargements

Partager

Gmail Facebook X LinkedIn More