1 neuromath kickoff meeting 2009-01-23 É. tlapale 1, g.s. masson 2, p. kornprobst 1 1 : Équipe...

17
1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1 , G.S. Masson 2 , P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

Upload: rudy-oswell

Post on 31-Mar-2015

216 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

1

Neuromath kickoff meeting

2009-01-23

É. Tlapale1, G.S. Masson2, P. Kornprobst1

1 : Équipe Odyssée (INRIA, ENS, INPC)2 : Équipe DyVA (INCM/CNRS)

Page 2: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

2

Current work• We design a bio-inspired model of motion integration.

– Functional model (V1/MT)– Feedbacks (MT => V1)– Form modulation (V2)

• Why ?– To reproduce motion perception– And its dynamic

Page 3: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

3

Influence of form

Chopstick illusions

Page 4: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

4

Influence of form

Chopstick illusions

Page 5: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

5

Influence de la forme

Jonctions intrinsèques vs extrinsèques

Page 6: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

6

Multi-layer feedback model

Input : grey-level sequence

Page 7: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

7

Multi-layer feedback model

Local motion detectors: correlation or energy models

Page 8: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

8

Multi-layer feedback model

Page 9: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

9

Multi-layer feedback model

Lateral inhibition => winner-take-all

Page 10: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

10

Un modèle multi-couche rétroactif

Feedback (Bayerl & Neumann, 2004)

Page 11: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

11

Multi-layer feedback model

Anisotropic diffusion

Page 12: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

12

Form-modulated diffusion

We only use luminosity for now

Page 13: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

13

Reproducing the perception

Wallach (1935)

Page 14: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

14

Wallace, Stone et Masson (2005)

Reproducing the dynamic

Eye-movement like read-out

Page 15: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

15

Reproducing the neurobiology

Huang, Albright et Stoner (2007)

Notion of objects

Page 16: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

16

Future work• Reformulate our model in a neural field formalism

• And using a multi-layer variational formalism

• Propose our form-motion interaction as a synchronisation mechanism

Page 17: 1 Neuromath kickoff meeting 2009-01-23 É. Tlapale 1, G.S. Masson 2, P. Kornprobst 1 1 : Équipe Odyssée (INRIA, ENS, INPC) 2 : Équipe DyVA (INCM/CNRS)

17

Journal clubs• Biology: Barthelemy et al. (2008)

• Models: Cesmely & Wang (2000)

• Technologies: Python, GPGPU