De la caméra au cortex : des marqueurs du quotidien ancrés dans le cerveau
Imaginez un patient fragile chez lui, un téléphone posé sur la table, et des mesures du regard, de la pupille et de la marche dignes d'un laboratoire. Oculomètres, capture du mouvement et EEG quittent rarement le laboratoire, et beaucoup de patients peuvent rarement s'y rendre. Ce défi apporte des mesures de niveau laboratoire aux caméras ordinaires, les valide face aux références de laboratoire et les ancre dans l'activité cérébrale, avec un EEG propre même quand on parle et marche et des chaînes de traitement qui tiennent d'un site à l'autre. Suivi sans marqueurs, modèles de fondation pour l'EEG et données ouvertes d'EEG et d'imagerie forment la trousse de départ d'un premier prototype et d'un plan d'étude. La question ouverte au cœur du défi : ce que la neurophysiologie/neuro-imagerie ajoute au-delà de la caméra.
Ressources
- Brain signals and imaging
- Wearables and phone sensing
- Sensitive data handling
- LEMON and OpenNeuro ↗
- MPIIFaceGaze — webcam gaze dataset (research use) ↗
- AddBiomechanics — motion-capture reference data ↗
- Simultaneous EEG–fMRI, neurofeedback (OpenNeuro ds002336, CC0) ↗
- EEG while walking — Audiocue (OpenNeuro ds001971) ↗
- EEGEyeNet — simultaneous EEG and eye tracking (OSF) ↗
- Healthy Brain Network — EEG, eye tracking, MRI (data use terms) ↗
- Dreem Open Datasets — headband vs lab sleep EEG ↗
- TUH EEG Corpus — clinical EEG (registration required) ↗
- NEMAR — open EEG/MEG repository ↗
- Speech models
- Language-model endpoints
- Data platform and governance
- Video / vision models
- Lab equipment
- OptiTrack and eye trackers ↗
- OpenCap — motion analysis from phone video, validated against motion capture (Apache-2.0) ↗
- Pose2Sim — 3D markerless pose from several cameras (BSD-3) ↗
- MMPose / RTMPose — pose estimation (Apache-2.0) ↗
- MediaPipe Pose Landmarker ↗
- OpenFace — gaze, head pose, facial action units (non-commercial academic) ↗
- WebGazer.js — webcam eye tracking in the browser (check licence) ↗
- Lab Streaming Layer — synchronise EEG, gaze, audio and motion ↗
- MNE-Python — EEG/MEG analysis (BSD-3) ↗
- pyprep — EEG preprocessing (PREP pipeline) ↗
- autoreject — automated EEG artefact rejection ↗
- Braindecode — deep learning on EEG (BSD-3) ↗
- LaBraM — EEG foundation model (MIT) ↗
- fMRIPrep — fMRI preprocessing (Apache-2.0) ↗
- FastSurfer — fast MRI segmentation (Apache-2.0) ↗
- SynthSeg — segmentation for any T1 scan (FreeSurfer) ↗
- Lead-DBS — deep brain stimulation electrode localisation ↗
- BIDS — standard layout for brain data ↗
