ss s trt - - PowerPoint PPT Presentation

ss s t r t r t r t s s t s
SMART_READER_LITE
LIVE PREVIEW

ss s trt - - PowerPoint PPT Presentation

trt Pt stts rs r ss s ss s


slide-1
SLIDE 1

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

▼✐ss✐♥❣ ✈❛❧✉❡s ✐♥ ♠✉❧t✐✈❛r✐❛t❡ ❡①♣❧♦r❛t♦r② ❞❛t❛ ❛♥❛❧②s✐s ♠❡t❤♦❞s

❏✉❧✐❡ ❏♦ss❡

❆♣♣❧✐❡❞ ♠❛t❤❡♠❛t✐❝s ❞❡♣❛rt♠❡♥t✱ ❆❣r♦❝❛♠♣✉s ❖✉❡st✱ ❘❡♥♥❡s✱ ❋r❛♥❝❡

❇r✉①❡❧❧❡s✱ ✷✷ ▼❛② ✷✵✶✷

✶ ✴ ✸✺

slide-2
SLIDE 2

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❖✉t❧✐♥❡

✶ ■♥tr♦❞✉❝t✐♦♥ ✷ P♦✐♥t ❡st✐♠❛t❡s ♦❢ t❤❡ P❈❆ ❛①❡s ❛♥❞ ❝♦♠♣♦♥❡♥ts ✸ ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ✐♥ P❈❆ ✹ ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ✐♥ P❈❆ ✺ ▼✉❧t✐♣❧❡ ❈♦rr❡s♣♦♥❞❡♥❝❡ ❆♥❛❧②s✐s ✻ ❈♦♥❝❧✉s✐♦♥

✷ ✴ ✸✺

slide-3
SLIDE 3

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❈♦♥t❡①t

  • 1.0

ind 1 ind i ind I V1 Vj VJ ind 1 ind i ind I V1 Vj VJ

  • 1.0
  • 0.5
0.0 0.5 1.0 1.5
  • 0.5
0.0 0.5 1.0 Dim 1 (71.34%)

Intensité couleur Intensité odeur Intensité attaque Sucré Acide Amer Pulpeux Typicité

  • 2
2 4
  • 2
  • 1
1 2 Dim 1 (71.34%) Dim 2 (17.16%) 1 2 3 4 5 6 7 8 9 10 11 12

qualitative variables MCA quantitative variables PCA

✸ ✴ ✸✺

slide-4
SLIDE 4

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❈♦♥t❡①t

  • 1.0

ind 1 ind i ind I V1 Vj VJ ind 1 ind i ind I V1 Vj VJ

  • 1.0
  • 0.5
0.0 0.5 1.0 1.5
  • 0.5
0.0 0.5 1.0 Dim 1 (71.34%)

Intensité couleur Intensité odeur Intensité attaque Sucré Acide Amer Pulpeux Typicité

  • 2
2 4
  • 2
  • 1
1 2 Dim 1 (71.34%) Dim 2 (17.16%) 1 2 3 4 5 6 7 8 9 10 11 12

qualitative variables MCA quantitative variables PCA

PCA

✸ ✴ ✸✺

slide-5
SLIDE 5

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❙✐♥❣❧❡ ✐♠♣✉t❛t✐♦♥ ♠❡t❤♦❞s

✶ ✵ ✻ ❈■

②✾✺

✵✳✵✶ ✵✳✺ ✵✳✸✵ ✸✾✳✹ ✵✳✵✶ ✵✳✼✷ ✵✳✼✽ ✻✶✳✻ ✵✳✵✶ ✵✳✾✾ ✵✳✺✾ ✼✵✳✽ ❙t❛♥❞❛r❞ ❡rr♦rs ♦❢ t❤❡ ♣❛r❛♠❡t❡rs ✭

② ✮ ❝❛❧❝✉❧❛t❡❞ ❢r♦♠ t❤❡

✐♠♣✉t❡❞ ❞❛t❛ s❡t ❛r❡ ✉♥❞❡r❡st✐♠❛t❡❞

✹ ✴ ✸✺

slide-6
SLIDE 6

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❙✐♥❣❧❡ ✐♠♣✉t❛t✐♦♥ ♠❡t❤♦❞s

  • −3
−2 −1 1 2 −2 −1 1 2

Mean imputation X Y

  • ●●
  • µ② = ✵

σ② = ✶ ρ = ✵.✻ ❈■µ②✾✺% ✵✳✵✶ ✵✳✺ ✵✳✸✵ ✸✾✳✹ ✵✳✵✶ ✵✳✼✷ ✵✳✼✽ ✻✶✳✻ ✵✳✵✶ ✵✳✾✾ ✵✳✺✾ ✼✵✳✽ ❙t❛♥❞❛r❞ ❡rr♦rs ♦❢ t❤❡ ♣❛r❛♠❡t❡rs ✭

② ✮ ❝❛❧❝✉❧❛t❡❞ ❢r♦♠ t❤❡

✐♠♣✉t❡❞ ❞❛t❛ s❡t ❛r❡ ✉♥❞❡r❡st✐♠❛t❡❞

✹ ✴ ✸✺

slide-7
SLIDE 7

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❙✐♥❣❧❡ ✐♠♣✉t❛t✐♦♥ ♠❡t❤♦❞s

  • −3
−2 −1 1 2 −2 −1 1 2

Mean imputation X Y

  • ●●
  • −3
−2 −1 1 2 −2 −1 1 2

Regression imputation X Y

  • µ② = ✵

σ② = ✶ ρ = ✵.✻ ❈■µ②✾✺% ✵✳✵✶ ✵✳✺ ✵✳✸✵ ✸✾✳✹ ✵✳✵✶ ✵✳✼✷ ✵✳✼✽ ✻✶✳✻ ✵✳✵✶ ✵✳✾✾ ✵✳✺✾ ✼✵✳✽ ❙t❛♥❞❛r❞ ❡rr♦rs ♦❢ t❤❡ ♣❛r❛♠❡t❡rs ✭

② ✮ ❝❛❧❝✉❧❛t❡❞ ❢r♦♠ t❤❡

✐♠♣✉t❡❞ ❞❛t❛ s❡t ❛r❡ ✉♥❞❡r❡st✐♠❛t❡❞

✹ ✴ ✸✺

slide-8
SLIDE 8

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❙✐♥❣❧❡ ✐♠♣✉t❛t✐♦♥ ♠❡t❤♦❞s

  • −3
−2 −1 1 2 −2 −1 1 2

Mean imputation X Y

  • ●●
  • −3
−2 −1 1 2 −2 −1 1 2

Regression imputation X Y

  • −3
−2 −1 1 2 −3 −2 −1 1 2

Stochastic regression imputation X Y

  • µ② = ✵

σ② = ✶ ρ = ✵.✻ ❈■µ②✾✺% ✵✳✵✶ ✵✳✺ ✵✳✸✵ ✸✾✳✹ ✵✳✵✶ ✵✳✼✷ ✵✳✼✽ ✻✶✳✻ ✵✳✵✶ ✵✳✾✾ ✵✳✺✾ ✼✵✳✽ ⇒ ❙t❛♥❞❛r❞ ❡rr♦rs ♦❢ t❤❡ ♣❛r❛♠❡t❡rs ✭ˆ σˆ

µ② ✮ ❝❛❧❝✉❧❛t❡❞ ❢r♦♠ t❤❡

✐♠♣✉t❡❞ ❞❛t❛ s❡t ❛r❡ ✉♥❞❡r❡st✐♠❛t❡❞

✹ ✴ ✸✺

slide-9
SLIDE 9

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❘❡❝♦♠♠❡♥❞❡❞ ♠❡t❤♦❞s

⇒ ▼✉❧t✐♣❧❡ ✐♠♣✉t❛t✐♦♥ ✭❘✉❜✐♥✱ ✶✾✽✼✮✿

  • ❣❡♥❡r❛t✐♥❣ ♣❧❛✉s✐❜❧❡ ✈❛❧✉❡s ❢♦r ❡❛❝❤ ♠✐ss✐♥❣ ✈❛❧✉❡s
  • ♣❡r❢♦r♠✐♥❣ t❤❡ ❛♥❛❧②s✐s ♦♥ ❡❛❝❤ ✐♠♣✉t❡❞ ❞❛t❛ s❡t
  • ❝♦♠❜✐♥✐♥❣ t❤❡ r❡s✉❧ts

⇒ ▼❛①✐♠✉♠ ❧✐❦❡❧✐❤♦♦❞✿ ❊▼ ❛❧❣♦r✐t❤♠ ✭❉❡♠♣st❡r ❡t ❛❧✳✱ ✶✾✼✼✮ t♦ ♦❜t❛✐♥ ♣♦✐♥t ❡st✐♠❛t❡s ✰ ♦t❤❡r ❛❧❣♦r✐t❤♠s t♦ ♦❜t❛✐♥ ❡st✐♠❛t❡ ♦❢ t❤❡✐r ✈❛r✐❛❜✐❧✐t② ⇒ ❈♦♠♠♦♥ ❛✐♠✿ ♣r♦✈✐❞❡ t❤❡ ❜❡st ❡st✐♠❛t✐♦♥ ♦❢ t❤❡ ♣❛r❛♠❡t❡rs ❛♥❞ ♦❢ t❤❡✐r ✈❛r✐❛❜✐❧✐t② ✭t❛❦❡♥ ✐♥t♦ ❛❝❝♦✉♥t t❤❡ ✈❛r✐❛❜✐❧✐t② ❞✉❡ t♦ ♠✐ss✐♥❣ ✈❛❧✉❡s✮

✺ ✴ ✸✺

slide-10
SLIDE 10

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❖✉t❧✐♥❡

✶ ■♥tr♦❞✉❝t✐♦♥ ✷ P♦✐♥t ❡st✐♠❛t❡s ♦❢ t❤❡ P❈❆ ❛①❡s ❛♥❞ ❝♦♠♣♦♥❡♥ts ✸ ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ✐♥ P❈❆ ✹ ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ✐♥ P❈❆ ✺ ▼✉❧t✐♣❧❡ ❝♦rr❡s♣♦♥❞❡♥❝❡ ❛♥❛❧②s✐s ✻ ❈♦♥❝❧✉s✐♦♥s ❛♥❞ ♣❡rs♣❡❝t✐✈❡s

✻ ✴ ✸✺

slide-11
SLIDE 11

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❖✉t❧✐♥❡

✶ ■♥tr♦❞✉❝t✐♦♥ ✷ P♦✐♥t ❡st✐♠❛t❡s ♦❢ t❤❡ P❈❆ ❛①❡s ❛♥❞ ❝♦♠♣♦♥❡♥ts ✸ ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ✐♥ P❈❆ ✹ ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ✐♥ P❈❆ ✺ ▼✉❧t✐♣❧❡ ❈♦rr❡s♣♦♥❞❡♥❝❡ ❆♥❛❧②s✐s ✻ ❈♦♥❝❧✉s✐♦♥

✼ ✴ ✸✺

slide-12
SLIDE 12

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❲❡✐❣❤t❡❞ ❧❡❛st sq✉❛r❡s

⇒ P❈❆ ♠✐♥✐♠✐③❡s✿ ❳■×❑ − ❋■×❙❯′

❙×❑✷

ˆ ❯❑×❙✿ ♣r✐♥❝✐♣❛❧ ❛①❡s ✭✉♥✐t s❝❛❧❡✮ ˆ ❋■×❙✿ ♣r✐♥❝✐♣❛❧ ❝♦♠♣♦♥❡♥ts ✲ ✐♥❞✐✈✐❞✉❛❧s ❝♦♦r❞ ✭❡✐❣❡♥✈❛❧✉❡s s❝❛❧❡✮ ⇒ ❲✐t❤ ♠✐ss✐♥❣ ✈❛❧✉❡s✿ ❲■×❑ ∗ (❳■×❑ − ❋■×❙❯′

❙×❑)✷

✇✐t❤ ✇✐❦ = ✵ ✐❢ ①✐❦ ✐s ♠✐ss✐♥❣✱ ✇✐❦ = ✶ ♦t❤❡r✇✐s❡ ▼❛♥② ❛❧❣♦r✐t❤♠s✿ ❝r✐ss✲❝r♦ss ♠✉❧t✐♣❧❡ r❡❣r❡ss✐♦♥ ✭●❛❜r✐❡❧ ✫ ❩❛♠✐r✱ ✶✾✼✾✮❀ ✐t❡r❛t✐✈❡ P❈❆ ✭❑✐❡rs✱ ✶✾✾✼✮

✽ ✴ ✸✺

slide-13
SLIDE 13

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

■t❡r❛t✐✈❡ P❈❆

  • 2
  • 1

1 2 3

  • 2
  • 1

1 2 3 x1 x2

x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 NA 2.0 1.98 ✾ ✴ ✸✺

slide-14
SLIDE 14

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

■t❡r❛t✐✈❡ P❈❆

  • 2
  • 1

1 2 3

  • 2
  • 1

1 2 3 x1 x2

x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 NA 2.0 1.98 x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 0.00 2.0 1.98

■♥✐t✐❛❧✐③❛t✐♦♥ ℓ = ✵✿ ❳✵ ✭♠❡❛♥ ✐♠♣✉t❛t✐♦♥✮

✾ ✴ ✸✺

slide-15
SLIDE 15

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

■t❡r❛t✐✈❡ P❈❆

  • 2
  • 1

1 2 3

  • 2
  • 1

1 2 3 x1 x2

x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 NA 2.0 1.98 x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 0.00 2.0 1.98 x1 x2

  • 1.98 -2.04
  • 1.44 -1.56

0.15 -0.18 1.00 0.57 2.27 1.67

P❈❆ ♦♥ t❤❡ ❝♦♠♣❧❡t❡❞ ❞❛t❛ s❡t → (ˆ ❋ℓ, ˆ ❯ℓ)❀

✾ ✴ ✸✺

slide-16
SLIDE 16

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

■t❡r❛t✐✈❡ P❈❆

  • 2
  • 1

1 2 3

  • 2
  • 1

1 2 3 x1 x2

x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 NA 2.0 1.98 x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 0.00 2.0 1.98 x1 x2

  • 1.98 -2.04
  • 1.44 -1.56

0.15 -0.18 1.00 0.57 2.27 1.67

▼✐ss✐♥❣ ✈❛❧✉❡s ❛r❡ ✐♠♣✉t❡❞ ✇✐t❤ t❤❡ ♠♦❞❡❧ ♠❛tr✐① ˆ ❳ℓ = ˆ ❋ℓ ˆ ❯ℓ′

✾ ✴ ✸✺

slide-17
SLIDE 17

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

■t❡r❛t✐✈❡ P❈❆

  • 2
  • 1

1 2 3

  • 2
  • 1

1 2 3 x1 x2

x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 NA 2.0 1.98 x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 0.00 2.0 1.98 x1 x2

  • 1.98 -2.04
  • 1.44 -1.56

0.15 -0.18 1.00 0.57 2.27 1.67 x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 0.57 2.0 1.98

❚❤❡ ♥❡✇ ✐♠♣✉t❡❞ ❞❛t❛s❡t ✐s ❳ℓ = ❲ ∗ ❳ + (✶ − ❲) ∗ ˆ ❳ℓ

✾ ✴ ✸✺

slide-18
SLIDE 18

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

■t❡r❛t✐✈❡ P❈❆

x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 NA 2.0 1.98 x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 0.57 2.0 1.98 x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 0.57 2.0 1.98

  • 2
  • 1

1 2 3

  • 2
  • 1

1 2 3 x1 x2

✾ ✴ ✸✺

slide-19
SLIDE 19

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

■t❡r❛t✐✈❡ P❈❆

x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 NA 2.0 1.98 x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 0.57 2.0 1.98 x1 x2

  • 2.00 -2.01
  • 1.47 -1.52

0.09 -0.11 1.20 0.90 2.18 1.78 x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 0.90 2.0 1.98

  • 2
  • 1

1 2 3

  • 2
  • 1

1 2 3 x1 x2

✾ ✴ ✸✺

slide-20
SLIDE 20

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

■t❡r❛t✐✈❡ P❈❆

x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 NA 2.0 1.98 x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 0.00 2.0 1.98 x1 x2

  • 1.98 -2.04
  • 1.44 -1.56

0.15 -0.18 1.00 0.57 2.27 1.67 x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 0.57 2.0 1.98

  • 2
  • 1

1 2 3

  • 2
  • 1

1 2 3 x1 x2

❙t❡♣s ❛r❡ r❡♣❡❛t❡❞ ✉♥t✐❧ ❝♦♥✈❡r❣❡♥❝❡

✾ ✴ ✸✺

slide-21
SLIDE 21

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

■t❡r❛t✐✈❡ P❈❆

x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 NA 2.0 1.98 x1 x2

  • 2.0 -2.01
  • 1.5 -1.48

0.0 -0.01 1.5 1.46 2.0 1.98

  • 2
  • 1

1 2 3

  • 2
  • 1

1 2 3 x1 x2

P❈❆ ♦♥ t❤❡ ❝♦♠♣❧❡t❡❞ ❞❛t❛ s❡t → (ˆ ❋ℓ, ˆ ❯ℓ) ▼✐ss✐♥❣ ✈❛❧✉❡s ❛r❡ ✐♠♣✉t❡❞ ✇✐t❤ t❤❡ ♠♦❞❡❧ ♠❛tr✐① ˆ ❳ℓ = ˆ ❋ℓ ˆ ❯ℓ′

✾ ✴ ✸✺

slide-22
SLIDE 22

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

■t❡r❛t✐✈❡ P❈❆

✶ ✐♥✐t✐❛❧✐③❛t✐♦♥ ℓ = ✵✿ ❳✵ ✭♠❡❛♥ ✐♠♣✉t❛t✐♦♥✮ ✷ st❡♣ ℓ✿

✭❛✮ P❈❆ ✐s ♣❡r❢♦r♠❡❞ ♦♥ t❤❡ ❝♦♠♣❧❡t❡❞ ❞❛t❛ s❡t → (ˆ ❋ℓ, ˆ ❯ℓ)❀ ❙ ❞✐♠❡♥s✐♦♥s ❛r❡ ❦❡♣t ✭❜✮ ♠✐ss✐♥❣ ✈❛❧✉❡s ❛r❡ ✐♠♣✉t❡❞ ✇✐t❤ t❤❡ ♠♦❞❡❧ ♠❛tr✐① ˆ ❳ℓ = ˆ ❋ℓ ˆ ❯ℓ′❀ t❤❡ ♥❡✇ ✐♠♣✉t❡❞ ❞❛t❛s❡t ✐s ❳ℓ = ❲ ∗ ❳ + (✶ − ❲) ∗ ˆ ❳ℓ

✸ st❡♣s ❛r❡ r❡♣❡❛t❡❞ ✉♥t✐❧ ❝♦♥✈❡r❣❡♥❝❡✳

⇒ ❚❤❡ ♥✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ❙ ❤❛s t♦ ❜❡ ❝❤♦s❡♥ ❛ ♣r✐♦r✐ ⇒ ■♠♣✉t❛t✐♦♥ ✭♠❛tr✐① ❝♦♠♣❧❡t✐♦♥ ❢r❛♠❡✇♦r❦✱ ◆❡t✢✐①✮ ⇒ ❘❡❞✉❝t✐♦♥ ♦❢ t❤❡ ✈❛r✐❛❜✐❧✐t② ✭✐♠♣✉t❛t✐♦♥ ❜② ˆ ❋ˆ ❯′✮ ⇒ ❊▼ ❛❧❣♦r✐t❤♠ ♦❢ ①✐❦ = ❙

s=✶ ❢✐s✉❦s + ε✐❦, ε✐❦ ∼ N(✵, σ✷)

✶✵ ✴ ✸✺

slide-23
SLIDE 23

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❖✈❡r✜tt✐♥❣

❳✹✶×✻ = ❋✹✶×✷❯′

✷×✻ + N(✵, ✵.✺)

✺✵✪ ♦❢ ◆❆

  • 4
  • 2
2 4
  • 3
  • 2
  • 1
1 2 3 4 ACP sur données complètes Dim 1 (55.09%) Dim 2 (27.91%) SEBRLE CLAY KARPOV BERNARD YURKOV WARNERS ZSIVOCZKY McMULLEN MARTINEAU HERNU BARRAS NOOL BOURGUIGNON Sebrle Clay Karpov Macey Warners Zsivoczky Hernu Nool Bernard Schwarzl Pogorelov Schoenbeck Barras Smith Averyanov Ojaniemi Smirnov Qi Drews Parkhomenko Terek Gomez Turi Lorenzo Karlivans Korkizoglou Uldal Casarsa

✜tt✐♥❣ ❡rr♦r ✐s ❧♦✇✿ ❲ ❳ ❳

✵ ✹✽ ♣r❡❞✐❝t✐♦♥ ❡rr♦r ✐s ❤✐❣❤✿ ✶ ❲ ❳ ❳

✺ ✺✽

✶✶ ✴ ✸✺

slide-24
SLIDE 24

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❖✈❡r✜tt✐♥❣

❳✹✶×✻ = ❋✹✶×✷❯′

✷×✻ + N(✵, ✵.✺)

⇒ ✺✵✪ ♦❢ ◆❆

  • 4
  • 2
2 4
  • 3
  • 2
  • 1
1 2 3 4 ACP sur données complètes Dim 1 (55.09%) Dim 2 (27.91%) SEBRLE CLAY KARPOV BERNARD YURKOV WARNERS ZSIVOCZKY McMULLEN MARTINEAU HERNU BARRAS NOOL BOURGUIGNON Sebrle Clay Karpov Macey Warners Zsivoczky Hernu Nool Bernard Schwarzl Pogorelov Schoenbeck Barras Smith Averyanov Ojaniemi Smirnov Qi Drews Parkhomenko Terek Gomez Turi Lorenzo Karlivans Korkizoglou Uldal Casarsa
  • 4
  • 2
2 4
  • 4
  • 2
2 ACP itérative Dim 1 (63.97%) Dim 2 (31.9%) SEBRLE CLAY KARPOV BERNARD YURKOV WARNERS ZSIVOCZKY McMULLEN MARTINEAU HERNU BARRAS NOOL BOURGUIGNON Sebrle Clay Karpov Macey Warners Zsivoczky Hernu Nool Bernard Schwarzl Pogorelov Schoenbeck Barras Smith Averyanov Ojaniemi Smirnov Qi Drews Parkhomenko Terek Gomez Turi Lorenzo Karlivans Korkizoglou Uldal Casarsa

✜tt✐♥❣ ❡rr♦r ✐s ❧♦✇✿ ❲ ❳ ❳

✵ ✹✽ ♣r❡❞✐❝t✐♦♥ ❡rr♦r ✐s ❤✐❣❤✿ ✶ ❲ ❳ ❳

✺ ✺✽

✶✶ ✴ ✸✺

slide-25
SLIDE 25

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❖✈❡r✜tt✐♥❣

❳✹✶×✻ = ❋✹✶×✷❯′

✷×✻ + N(✵, ✵.✺)

⇒ ✺✵✪ ♦❢ ◆❆

  • 4
  • 2
2 4
  • 3
  • 2
  • 1
1 2 3 4 ACP sur données complètes Dim 1 (55.09%) Dim 2 (27.91%) SEBRLE CLAY KARPOV BERNARD YURKOV WARNERS ZSIVOCZKY McMULLEN MARTINEAU HERNU BARRAS NOOL BOURGUIGNON Sebrle Clay Karpov Macey Warners Zsivoczky Hernu Nool Bernard Schwarzl Pogorelov Schoenbeck Barras Smith Averyanov Ojaniemi Smirnov Qi Drews Parkhomenko Terek Gomez Turi Lorenzo Karlivans Korkizoglou Uldal Casarsa
  • 4
  • 2
2 4
  • 4
  • 2
2 ACP itérative Dim 1 (63.97%) Dim 2 (31.9%) SEBRLE CLAY KARPOV BERNARD YURKOV WARNERS ZSIVOCZKY McMULLEN MARTINEAU HERNU BARRAS NOOL BOURGUIGNON Sebrle Clay Karpov Macey Warners Zsivoczky Hernu Nool Bernard Schwarzl Pogorelov Schoenbeck Barras Smith Averyanov Ojaniemi Smirnov Qi Drews Parkhomenko Terek Gomez Turi Lorenzo Karlivans Korkizoglou Uldal Casarsa

⇒ ✜tt✐♥❣ ❡rr♦r ✐s ❧♦✇✿ ||❲ ∗ (❳ − ˆ ❳)||✷ = ✵.✹✽ ⇒ ♣r❡❞✐❝t✐♦♥ ❡rr♦r ✐s ❤✐❣❤✿ ||(✶ − ❲) ∗ (❳ − ˆ ❳)||✷ = ✺.✺✽

✶✶ ✴ ✸✺

slide-26
SLIDE 26

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❖✈❡r✜tt✐♥❣

❖✈❡r✜tt✐♥❣ ✇❤❡♥✿

  • ♠❛♥② ♣❛r❛♠❡t❡rs ✴ t❤❡ ♥✉♠❜❡r ♦❢ ♦❜s❡r✈❡❞ ✈❛❧✉❡s ✭t❤❡

♥✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ❙ ❛♥❞ ♦❢ ♠✐ss✐♥❣ ✈❛❧✉❡s ❛r❡ ✐♠♣♦rt❛♥t✮

  • ❞❛t❛ ❛r❡ ✈❡r② ♥♦✐s②

⇒ ❚r✉st t♦♦ ♠✉❝❤ t❤❡ r❡❧❛t✐♦♥s❤✐♣ ❜❡t✇❡❡♥ ✈❛r✐❛❜❧❡s ❘❡♠❛r❦s✿

  • ♠✐ss✐♥❣ ✈❛❧✉❡s✿ s♣❡❝✐❛❧ ❝❛s❡ ♦❢ s♠❛❧❧ ❞❛t❛ s❡t
  • ✐t❡r❛t✐✈❡ P❈❆✿ ♣r❡❞✐❝t✐♦♥ ♠❡t❤♦❞

❙♦❧✉t✐♦♥✿ ⇒ ❙❤r✐♥❦❛❣❡ ♠❡t❤♦❞s

✶✷ ✴ ✸✺

slide-27
SLIDE 27

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❘❡❣✉❧❛r✐③❡❞ ✐t❡r❛t✐✈❡ P❈❆ ✭❏♦ss❡ ❡t ❛❧✳✱ ✷✵✵✾✮

⇒ ■♥✐t✐❛❧✐③❛t✐♦♥ ✲ ❡st✐♠❛t✐♦♥ st❡♣ ✲ ✐♠♣✉t❛t✐♦♥ st❡♣ ❚❤❡ ✐♠♣✉t❛t✐♦♥ st❡♣✿ ˆ ①ℓ

✐❦ = ❙

  • s=✶

ˆ ❢ ℓ

✐sˆ

✉ℓ

❦s = ❙

  • s=✶

ˆ ❢ ℓ

✐s

ˆ ❢ℓ

s

(

  • λs)ˆ

✉ℓ

❦s

✐s r❡♣❧❛❝❡❞ ❜② ❛ ✧s❤r✉♥❦✧ ✐♠♣✉t❛t✐♦♥ st❡♣✿ ˆ ①ℓ

✐❦ = ❙

  • s=✶

ˆ ❢ ℓ

✐s

ˆ ❢ℓ

s

  • λs − ˆ

σ✷ √λs

  • ˆ

✉ℓ

❦s ✇✐t❤ ˆ

σ✷ = ✶ ❑ − ❙

  • s=❙+✶

λs ⇒ ❘❡♠♦✈❡ t❤❡ ♥♦✐s❡ t♦ ❛✈♦✐❞ ✐♥st❛❜✐❧✐t② ♦♥ t❤❡ ♣r❡❞✐❝t✐♦♥s ❙♦❢t t❤r❡s❤♦❧❞✐♥❣✿ ▼❛③✉♠❞❡r✱ ❍❛st✐❡ ✫ ❚✐❜s❤✐r❛♥✐ ✭✷✵✵✾✮❀ ✇❡✐❣❤t❡❞ ✈❡rs✐♦♥✿ ●❛✐✛❛s ✫ ▲❡❝✉é ✭✷✵✶✶✮

✶✸ ✴ ✸✺

slide-28
SLIDE 28

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❘❡❣✉❧❛r✐③❡❞ ✐t❡r❛t✐✈❡ P❈❆

❳✹✶×✻ = ❋✹✶×✷❯′

✷×✻ + N(✵, ✵.✺)

⇒ ✺✵✪ ♦❢ ◆❆

  • 4
  • 2
2 4
  • 3
  • 2
  • 1
1 2 3 4 ACP sur données complètes Dim 1 (55.09%) Dim 2 (27.91%) SEBRLE CLAY KARPOV BERNARD YURKOV WARNERS ZSIVOCZKY McMULLEN MARTINEAU HERNU BARRAS NOOL BOURGUIGNON Sebrle Clay Karpov Macey Warners Zsivoczky Hernu Nool Bernard Schwarzl Pogorelov Schoenbeck Barras Smith Averyanov Ojaniemi Smirnov Qi Drews Parkhomenko Terek Gomez Turi Lorenzo Karlivans Korkizoglou Uldal Casarsa
  • 4
  • 2
2 4
  • 3
  • 2
  • 1
1 2 3 ACP régularisée Dim 1 (64.27%) Dim 2 (30.72%) SEBRLE CLAY KARPOV BERNARD YURKOV WARNERS ZSIVOCZKY McMULLEN MARTINEAU HERNU BARRAS NOOL BOURGUIGNON Sebrle Clay Karpov Macey Warners Zsivoczky Hernu Nool Bernard Schwarzl Pogorelov Schoenbeck Barras Smith Averyanov Ojaniemi Smirnov Qi Drews Parkhomenko Terek Gomez Turi Lorenzo Karlivans Korkizoglou Uldal Casarsa

⇒ ✜tt✐♥❣ ❡rr♦r✿ ||❲ ∗ (❳ − ˆ ❳)||✷ = ✵.✺✷ ✭❊▼❂ ✵✳✹✽✮ ⇒ ♣r❡❞✐❝t✐♦♥ ❡rr♦r✿ ||(✶ − ❲) ∗ (❳ − ˆ ❳)||✷ = ✵.✻✼ ✭❊▼❂ ✺✳✺✽✮

✶✹ ✴ ✸✺

slide-29
SLIDE 29

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❖✉t❧✐♥❡

✶ ■♥tr♦❞✉❝t✐♦♥ ✷ P♦✐♥t ❡st✐♠❛t❡s ♦❢ t❤❡ P❈❆ ❛①❡s ❛♥❞ ❝♦♠♣♦♥❡♥ts ✸ ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ✐♥ P❈❆ ✹ ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ✐♥ P❈❆ ✺ ▼✉❧t✐♣❧❡ ❈♦rr❡s♣♦♥❞❡♥❝❡ ❆♥❛❧②s✐s ✻ ❈♦♥❝❧✉s✐♦♥

✶✺ ✴ ✸✺

slide-30
SLIDE 30

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❯♥❝❡rt❛✐♥t② ✐♥ P❈❆✿ ❝♦♠♣❧❡t❡ ❝❛s❡

⇒ P❈❆ ♦♥ ❛ r❛♥❞♦♠ s❛♠♣❧❡ ❢r♦♠ ❛ ♣♦♣✉❧❛t✐♦♥

  • ■♥❞✐✈✐❞✉❛❧s ❜♦♦tstr❛♣ ✭▲❡❜❛rt ✶✾✾✻✱ ❚✐♠♠❡r♠❛♥ ❡t ❛❧✱ ✷✵✵✼✮
  • ❙❛♠♣❧✐♥❣ ✈❛r✐❛❜✐❧✐t②
  • ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ❛r♦✉♥❞ t❤❡ ♣♦s✐t✐♦♥ ♦❢ t❤❡ ✈❛r✐❛❜❧❡s

⇒ P❈❆ ♦♥ ❛ ❢✉❧❧ ♣♦♣✉❧❛t✐♦♥ ❞❛t❛❄ ①✐❦ = ❙

s=✶ ❢✐s✉❦s + ε✐❦

  • ❘❡s✐❞✉❛❧s ❜♦♦tstr❛♣
  • ❋❧✉❝t✉❛t✐♦♥s ❞✉❡ t♦ t❤❡ ♥♦✐s❡
  • ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ❛r♦✉♥❞ t❤❡ ✐♥❞✐✈✐❞✉❛❧s ❛♥❞ t❤❡ ✈❛r✐❛❜❧❡s

✶✻ ✴ ✸✺

slide-31
SLIDE 31

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❘❡s✐❞✉❛❧s ❜♦♦tstr❛♣✿ ❝♦♠♣❧❡t❡ ❝❛s❡

  • P❈❆ ♦♥ ❳ ⇒ ˆ

❋■×❙ ❛♥❞ ˆ ❯❑×❙ ✭❙ ❞✐♠❡♥s✐♦♥s ❛r❡ ❦❡♣t✮

  • ▼♦❞❡❧ ♠❛tr✐① ˆ

❳ = ˆ ❋ˆ ❯′ ❛♥❞ r❡s✐❞✉❛❧s ˆ ε = ❳ − ˆ ❳ ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s❄

  • ❇♦♦tstr❛♣ ♣r♦❝❡❞✉r❡✿ r❡♣❡❛t ❇ t✐♠❡s

✶ r❡s✐❞✉❛❧s ❛r❡ ❜♦♦tstr❛♣♣❡❞ ♦r ❞r❛✇♥ ❢r♦♠ N(✵, ˆ

σ✷)✿ ε❜ ❯♥❞❡r✲❡st✐♠❛t✐♦♥ ♦❢ t❤❡ r❡s✐❞✉❛❧s❄

✷ ❳❜ = ˆ

❳ + ε❜

✸ P❈❆ ♦♥ ❳❜ t♦ ♦❜t❛✐♥ ˆ

❋❜ ❛♥❞ ˆ ❯❜

⇒ ❇ ❝♦✉♣❧❡s (ˆ ❋✶, ˆ ❯✶), ..., (ˆ ❋❇, ˆ ❯❇) ❱✐s✉❛❧✐③❛t✐♦♥❄

✶✼ ✴ ✸✺

slide-32
SLIDE 32

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❘❡s✐❞✉❛❧s ❜♦♦tstr❛♣✿ ❝♦♠♣❧❡t❡ ❝❛s❡

  • P❈❆ ♦♥ ❳ ⇒ ˆ

❋■×❙ ❛♥❞ ˆ ❯❑×❙ ✭❙ ❞✐♠❡♥s✐♦♥s ❛r❡ ❦❡♣t✮

  • ▼♦❞❡❧ ♠❛tr✐① ˆ

❳ = ˆ ❋ˆ ❯′ ❛♥❞ r❡s✐❞✉❛❧s ˆ ε = ❳ − ˆ ❳ ⇒ ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s❄

  • ❇♦♦tstr❛♣ ♣r♦❝❡❞✉r❡✿ r❡♣❡❛t ❇ t✐♠❡s

✶ r❡s✐❞✉❛❧s ❛r❡ ❜♦♦tstr❛♣♣❡❞ ♦r ❞r❛✇♥ ❢r♦♠ N(✵, ˆ

σ✷)✿ ε❜ ⇒ ❯♥❞❡r✲❡st✐♠❛t✐♦♥ ♦❢ t❤❡ r❡s✐❞✉❛❧s❄

✷ ❳❜ = ˆ

❳ + ε❜

✸ P❈❆ ♦♥ ❳❜ t♦ ♦❜t❛✐♥ ˆ

❋❜ ❛♥❞ ˆ ❯❜

⇒ ❇ ❝♦✉♣❧❡s (ˆ ❋✶, ˆ ❯✶), ..., (ˆ ❋❇, ˆ ❯❇) ⇒ ❱✐s✉❛❧✐③❛t✐♦♥❄

✶✼ ✴ ✸✺

slide-33
SLIDE 33

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❯♥❝❡rt❛✐♥t② ❞✉❡ t♦ ♠✐ss✐♥❣ ✈❛❧✉❡s

⇒ ❆ ♥❡✇ s♦✉r❝❡ ♦❢ ✈❛r✐❛❜✐❧✐t② t♦ t❛❦❡ ✐♥t♦ ❛❝❝♦✉♥t

  • ❧❡ss ❞❛t❛✿ ♠♦r❡ ✉♥❝❡rt❛✐♥t②
  • ✐t❡r❛t✐✈❡ P❈❆✿ s✐♥❣❧❡ ✐♠♣✉t❛t✐♦♥ → ❛ r❡s✐❞✉❛❧ ❜♦♦tstr❛♣

❛♣♣❧✐❡❞ ♦♥ t❤❡ ❝♦♠♣❧❡t❡❞ ❞❛t❛ ✇♦✉❧❞ ❧❡❛❞ t♦ ❛♥ ✉♥❞❡r❡st✐♠❛t✐♦♥ ♦❢ t❤❡ ✈❛r✐❛❜✐❧✐t② ⇒ ▼✉❧t✐♣❧❡ ✐♠♣✉t❛t✐♦♥

✶ ●❡♥❡r❛t✐♥❣ ❇ ✐♠♣✉t❡❞ ❞❛t❛ s❡ts ✷ P❡r❢♦r♠✐♥❣ t❤❡ ❛♥❛❧②s✐s ♦♥ ❡❛❝❤ ✐♠♣✉t❡❞ ❞❛t❛ s❡t ✸ ❈♦♠❜✐♥✐♥❣ t❤❡ r❡s✉❧ts✿ t♦t❛❧ ✈❛r✐❛❜✐❧✐t② = ✇✐t❤✐♥ ✐♠♣✉t❛t✐♦♥

✈❛r✐❛❜✐❧✐t② ✰ ❜❡t✇❡❡♥ ✐♠♣✉t❛t✐♦♥ ✈❛r✐❛❜✐❧✐t②

✶✽ ✴ ✸✺

slide-34
SLIDE 34

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❯♥❝❡rt❛✐♥t② ❞✉❡ t♦ ♠✐ss✐♥❣ ✈❛❧✉❡s

⇒ ❆ ♥❡✇ s♦✉r❝❡ ♦❢ ✈❛r✐❛❜✐❧✐t② t♦ t❛❦❡ ✐♥t♦ ❛❝❝♦✉♥t

  • ❧❡ss ❞❛t❛✿ ♠♦r❡ ✉♥❝❡rt❛✐♥t②
  • ✐t❡r❛t✐✈❡ P❈❆✿ s✐♥❣❧❡ ✐♠♣✉t❛t✐♦♥ → ❛ r❡s✐❞✉❛❧ ❜♦♦tstr❛♣

❛♣♣❧✐❡❞ ♦♥ t❤❡ ❝♦♠♣❧❡t❡❞ ❞❛t❛ ✇♦✉❧❞ ❧❡❛❞ t♦ ❛♥ ✉♥❞❡r❡st✐♠❛t✐♦♥ ♦❢ t❤❡ ✈❛r✐❛❜✐❧✐t② ⇒ ▼✉❧t✐♣❧❡ ✐♠♣✉t❛t✐♦♥

✶ ●❡♥❡r❛t✐♥❣ ❇ ✐♠♣✉t❡❞ ❞❛t❛ s❡ts✿ ❜ = ✶, ..., ❇✱ ♠✐ss✐♥❣ ✈❛❧✉❡s

①❜

✐❦ ❞r❛✇♥ ❢r♦♠ t❤❡ ♣r❡❞✐❝t✐✈❡ ❞✐str✐❜✉t✐♦♥ N

❋ˆ ❯′)✐❦, ˆ σ✷ ⇒ ✧✐♠♣r♦♣❡r✧ ✐♠♣✉t❛t✐♦♥

✷ P❡r❢♦r♠✐♥❣ t❤❡ ❛♥❛❧②s✐s ♦♥ ❡❛❝❤ ✐♠♣✉t❡❞ ❞❛t❛ s❡t ✸ ❈♦♠❜✐♥✐♥❣ t❤❡ r❡s✉❧ts✿ t♦t❛❧ ✈❛r✐❛❜✐❧✐t② = ✇✐t❤✐♥ ✐♠♣✉t❛t✐♦♥

✈❛r✐❛❜✐❧✐t② ✰ ❜❡t✇❡❡♥ ✐♠♣✉t❛t✐♦♥ ✈❛r✐❛❜✐❧✐t②

✶✽ ✴ ✸✺

slide-35
SLIDE 35

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

✏♣r♦♣❡r✑ ♠✉❧t✐♣❧❡ ✐♠♣✉t❛t✐♦♥

✶ ❱❛r✐❛❜✐❧✐t② ♦❢ t❤❡ ♣❛r❛♠❡t❡rs✿ ♦❜t❛✐♥✐♥❣ ❇ ♣❧❛✉s✐❜❧❡ s❡ts ♦❢

♣❛r❛♠❡t❡rs✱ (ˆ ❋, ˆ ❯′)✶, ..., (ˆ ❋, ˆ ❯′)❇ ⇒ r❡s✐❞✉❛❧s ❜♦♦tstr❛♣

✷ ◆♦✐s❡✿ ❢♦r ❜ = ✶, ..., ❇✱ ♠✐ss✐♥❣ ✈❛❧✉❡s ①❜ ✐❦ ❛r❡ ✐♠♣✉t✐♥❣ ❜②

❞r❛✇✐♥❣ ❢r♦♠ t❤❡ ♣r❡❞✐❝t✐✈❡ ❞✐str✐❜✉t✐♦♥ N

❋ˆ ❯′)❜

✐❦, ˆ

σ✷

F U′ F U ′

ε

F U′

ε

F U′

ε

  • F

U ′

ε

  • ✶✾ ✴ ✸✺
slide-36
SLIDE 36

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❙✉♣♣❧❡♠❡♥t❛r② ♣r♦❥❡❝t✐♦♥

⇒ ■♥❞✐✈✐❞✉❛❧s ♣♦s✐t✐♦♥ ✭❛♥❞ ✈❛r✐❛❜❧❡s✮ ✇✐t❤ ♦t❤❡r ♣r❡❞✐❝t✐♦♥s

Supplementary projection PCA

❘❡❣✉❧❛r✐③❡❞ ✐t❡r❛t✐✈❡ P❈❆ ⇒ r❡❢❡r❡♥❝❡ ❝♦♥✜❣✉r❛t✐♦♥

✷✵ ✴ ✸✺

slide-37
SLIDE 37

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❙✉♣♣❧❡♠❡♥t❛r② ♣r♦❥❡❝t✐♦♥

⇒ ■♥❞✐✈✐❞✉❛❧s ♣♦s✐t✐♦♥ ✭❛♥❞ ✈❛r✐❛❜❧❡s✮ ✇✐t❤ ♦t❤❡r ♣r❡❞✐❝t✐♦♥s

Supplementary projection PCA

❘❡❣✉❧❛r✐③❡❞ ✐t❡r❛t✐✈❡ P❈❆ ⇒ r❡❢❡r❡♥❝❡ ❝♦♥✜❣✉r❛t✐♦♥

✷✵ ✴ ✸✺

slide-38
SLIDE 38

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❙✉♣♣❧❡♠❡♥t❛r② ♣r♦❥❡❝t✐♦♥

⇒ ■♥❞✐✈✐❞✉❛❧s ♣♦s✐t✐♦♥ ✭❛♥❞ ✈❛r✐❛❜❧❡s✮ ✇✐t❤ ♦t❤❡r ♣r❡❞✐❝t✐♦♥s

Supplementary projection PCA

❘❡❣✉❧❛r✐③❡❞ ✐t❡r❛t✐✈❡ P❈❆ ⇒ r❡❢❡r❡♥❝❡ ❝♦♥✜❣✉r❛t✐♦♥

✷✵ ✴ ✸✺

slide-39
SLIDE 39

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❙✉♣♣❧❡♠❡♥t❛r② ♣r♦❥❡❝t✐♦♥

  • −6
−4 −2 2 4 6 −4 −2 2 4

Supplementary projection

Dim 1 (71.33%) Dim 2 (17.17%)
  • 1
2 3 4 5 6 7 8 9 10 11 12
  • −1.5
−1.0 −0.5 0.0 0.5 1.0 1.5 −1.0 −0.5 0.0 0.5 1.0

Variable representation

Dim 1 (71.33%) Dim 2 (17.17%) Color.intensity Odor.intensity Attack.intensity Sweet Acid Bitter Pulp Typicity

✷✶ ✴ ✸✺

slide-40
SLIDE 40

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❇❡t✇❡❡♥ ✐♠♣✉t❛t✐♦♥ ✈❛r✐❛❜✐❧✐t②

⇒ ■♥✢✉❡♥❝❡ ♦❢ t❤❡ ❞✐✛❡r❡♥t ♣r❡❞✐❝t✐♦♥s ♦♥ t❤❡ ♣❛r❛♠❡t❡rs ✭P❈❆ ♦♥ ❡❛❝❤ t❛❜❧❡✮

PCA ✷✷ ✴ ✸✺

slide-41
SLIDE 41

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❇❡t✇❡❡♥ ✐♠♣✉t❛t✐♦♥ ✈❛r✐❛❜✐❧✐t②

⇒ ■♥✢✉❡♥❝❡ ♦❢ t❤❡ ❞✐✛❡r❡♥t ♣r❡❞✐❝t✐♦♥s ♦♥ t❤❡ ♣❛r❛♠❡t❡rs ✭P❈❆ ♦♥ ❡❛❝❤ t❛❜❧❡✮

PCA

′ ′ ′ ′

✷✷ ✴ ✸✺

slide-42
SLIDE 42

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❇❡t✇❡❡♥ ✐♠♣✉t❛t✐♦♥ ✈❛r✐❛❜✐❧✐t②

⇒ ■♥✢✉❡♥❝❡ ♦❢ t❤❡ ❞✐✛❡r❡♥t ♣r❡❞✐❝t✐♦♥s ♦♥ t❤❡ ♣❛r❛♠❡t❡rs ✭P❈❆ ♦♥ ❡❛❝❤ t❛❜❧❡✮

Procrustean rotation PCA

′ ′ ′ ′

✷✷ ✴ ✸✺

slide-43
SLIDE 43

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❇❡t✇❡❡♥ ✐♠♣✉t❛t✐♦♥ ✈❛r✐❛❜✐❧✐t②

⇒ ■♥✢✉❡♥❝❡ ♦❢ t❤❡ ❞✐✛❡r❡♥t ♣r❡❞✐❝t✐♦♥s ♦♥ t❤❡ ♣❛r❛♠❡t❡rs ✭P❈❆ ♦♥ ❡❛❝❤ t❛❜❧❡✮

Procrustean rotation PCA

′ ′ ′ ′

✷✷ ✴ ✸✺

slide-44
SLIDE 44

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❇❡t✇❡❡♥ ✐♠♣✉t❛t✐♦♥ ✈❛r✐❛❜✐❧✐t②

  • −4

−2 2 4 6 −4 −2 2

Multiple imputation using Procrustes

Dim 1 (71.33%) Dim 2 (17.17%)

  • 1

2 3 4 5 6 7 8 9 10 11 12 ✷✸ ✴ ✸✺

slide-45
SLIDE 45

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❖✉t❧✐♥❡

✶ ■♥tr♦❞✉❝t✐♦♥ ✷ P♦✐♥t ❡st✐♠❛t❡s ♦❢ t❤❡ P❈❆ ❛①❡s ❛♥❞ ❝♦♠♣♦♥❡♥ts ✸ ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ✐♥ P❈❆ ✹ ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ✐♥ P❈❆ ✺ ▼✉❧t✐♣❧❡ ❈♦rr❡s♣♦♥❞❡♥❝❡ ❆♥❛❧②s✐s ✻ ❈♦♥❝❧✉s✐♦♥

✷✹ ✴ ✸✺

slide-46
SLIDE 46

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❈r♦ss✲✈❛❧✐❞❛t✐♦♥

? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?

⇒ ❊▼✲❈❱ ✭❇r♦ ❡t ❛❧✳ ✷✵✵✽✮ ▼❙❊P❙ = ✶ ■❑

  • ✐=✶

  • ❦=✶

(①✐❦−ˆ ①−✐❦

✐❦

)✷ ⇒ ❈♦♠♣✉t❛t✐♦♥❛❧ ❝♦st❧② ■♥ r❡❣r❡ss✐♦♥ ② P② ✭❈r❛✈❡♥ ✫ ❲❤❛❜❛✱ ✶✾✼✾✮✿ ②

✐ ✐

②✐ ②✐ ②✐ ✶ P✐ ✐ ❆✐♠✿ ✇r✐t❡ P❈❆ ❛s ❳ P❳ ✭❝♦♠♣❧❡t❡ ❝❛s❡ ❛♣♣r♦①✐♠❛t✐♦♥✮ ①

✐❦ ✐❦

①✐❦ ①✐❦ ①✐❦ ✶ P✐❦ ✐❦

✷✺ ✴ ✸✺

slide-47
SLIDE 47

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❈r♦ss✲✈❛❧✐❞❛t✐♦♥

? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?

⇒ ❊▼✲❈❱ ✭❇r♦ ❡t ❛❧✳ ✷✵✵✽✮ ▼❙❊P❙ = ✶ ■❑

  • ✐=✶

  • ❦=✶

(①✐❦−ˆ ①−✐❦

✐❦

)✷ ⇒ ❈♦♠♣✉t❛t✐♦♥❛❧ ❝♦st❧② ■♥ r❡❣r❡ss✐♦♥ ② P② ✭❈r❛✈❡♥ ✫ ❲❤❛❜❛✱ ✶✾✼✾✮✿ ②

✐ ✐

②✐ ②✐ ②✐ ✶ P✐ ✐ ❆✐♠✿ ✇r✐t❡ P❈❆ ❛s ❳ P❳ ✭❝♦♠♣❧❡t❡ ❝❛s❡ ❛♣♣r♦①✐♠❛t✐♦♥✮ ①

✐❦ ✐❦

①✐❦ ①✐❦ ①✐❦ ✶ P✐❦ ✐❦

✷✺ ✴ ✸✺

slide-48
SLIDE 48

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❈r♦ss✲✈❛❧✐❞❛t✐♦♥

? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?

⇒ ❊▼✲❈❱ ✭❇r♦ ❡t ❛❧✳ ✷✵✵✽✮ ▼❙❊P❙ = ✶ ■❑

  • ✐=✶

  • ❦=✶

(①✐❦−ˆ ①−✐❦

✐❦

)✷ ⇒ ❈♦♠♣✉t❛t✐♦♥❛❧ ❝♦st❧② ■♥ r❡❣r❡ss✐♦♥ ② P② ✭❈r❛✈❡♥ ✫ ❲❤❛❜❛✱ ✶✾✼✾✮✿ ②

✐ ✐

②✐ ②✐ ②✐ ✶ P✐ ✐ ❆✐♠✿ ✇r✐t❡ P❈❆ ❛s ❳ P❳ ✭❝♦♠♣❧❡t❡ ❝❛s❡ ❛♣♣r♦①✐♠❛t✐♦♥✮ ①

✐❦ ✐❦

①✐❦ ①✐❦ ①✐❦ ✶ P✐❦ ✐❦

✷✺ ✴ ✸✺

slide-49
SLIDE 49

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❈r♦ss✲✈❛❧✐❞❛t✐♦♥

? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?

⇒ ❊▼✲❈❱ ✭❇r♦ ❡t ❛❧✳ ✷✵✵✽✮ ▼❙❊P❙ = ✶ ■❑

  • ✐=✶

  • ❦=✶

(①✐❦−ˆ ①−✐❦

✐❦

)✷ ⇒ ❈♦♠♣✉t❛t✐♦♥❛❧ ❝♦st❧② ⇒ ■♥ r❡❣r❡ss✐♦♥ ˆ ② = P② ✭❈r❛✈❡♥ ✫ ❲❤❛❜❛✱ ✶✾✼✾✮✿ ˆ ②−✐

− ②✐ = ˆ ②✐ − ②✐ ✶ − P✐,✐ ❆✐♠✿ ✇r✐t❡ P❈❆ ❛s ❳ P❳ ✭❝♦♠♣❧❡t❡ ❝❛s❡ ❛♣♣r♦①✐♠❛t✐♦♥✮ ①

✐❦ ✐❦

①✐❦ ①✐❦ ①✐❦ ✶ P✐❦ ✐❦

✷✺ ✴ ✸✺

slide-50
SLIDE 50

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❈r♦ss✲✈❛❧✐❞❛t✐♦♥

? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?

⇒ ❊▼✲❈❱ ✭❇r♦ ❡t ❛❧✳ ✷✵✵✽✮ ▼❙❊P❙ = ✶ ■❑

  • ✐=✶

  • ❦=✶

(①✐❦−ˆ ①−✐❦

✐❦

)✷ ⇒ ❈♦♠♣✉t❛t✐♦♥❛❧ ❝♦st❧② ⇒ ■♥ r❡❣r❡ss✐♦♥ ˆ ② = P② ✭❈r❛✈❡♥ ✫ ❲❤❛❜❛✱ ✶✾✼✾✮✿ ˆ ②−✐

− ②✐ = ˆ ②✐ − ②✐ ✶ − P✐,✐ ⇒ ❆✐♠✿ ✇r✐t❡ P❈❆ ❛s ˆ ❳ = P❳ ✭❝♦♠♣❧❡t❡ ❝❛s❡ ❛♣♣r♦①✐♠❛t✐♦♥✮ ˆ ①−✐❦

✐❦

− ①✐❦ ≃ ˆ ①✐❦ − ①✐❦ ✶ − P✐❦,✐❦

✷✺ ✴ ✸✺

slide-51
SLIDE 51

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

Pr♦❥❡❝t✐♦♥ ✐♥ P❈❆

❳■×❑ − ❋■×❙❯′

❙×❑✷

⇒ ✷ ♣r♦❥❡❝t✐♦♥ ♠❛tr✐❝❡s ˆ ❯′ = (ˆ ❋′ˆ ❋)−✶ˆ ❋′❳ ⇒ P❋ = ˆ ❋(ˆ ❋′ˆ ❋)−✶ˆ ❋′ ˆ ❋ = ❳ˆ ❯(ˆ ❯′ ˆ ❯)−✶ ⇒ P❯ = ˆ ❯(ˆ ❯′ ˆ ❯)−✶ ˆ ❯′ ⇒ ❇✐❧✐♥❡❛r ❢♦r♠ ▼♦❞❡❧ ♠❛tr✐① ˆ ❳(❙) = ˆ ❋ˆ ❯′ ⇒ ˆ ❳(❙) = P❋❳ = ❳P❯ ❘❡s✐❞✉❛❧ ♠❛tr✐① ˆ ε = ❳ − ˆ ❳(❙) ⇒ ˆ ε = (I■ − P❋)❳(I❑ − P❯) ⇒ ❚❤✐s ❡q✉❛t✐♦♥ ❝❛♥ ❜❡ ❞❡✈❡❧♦♣❡❞❀ t❤❡ ♠♦❞❡❧ ♠❛tr✐① ✐s ❡①tr❛❝t❡❞✿ ˆ ❳ − ˆ ❳(❙) = ❳ − (I■❳P❯ + P❋❳I❑ − P❋❳P❯).

✷✻ ✴ ✸✺

slide-52
SLIDE 52

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❇✐❣ ♣r♦❥❡❝t✐♦♥ ♠❛tr✐①

✈❡❝(ˆ ❳(❙)) = ✈❡❝(I■❳P❯) + ✈❡❝(P❋❳I❑) − ✈❡❝(P❋❳P❯) ✈❡❝(ˆ ❳(❙)) = (P

❯ ⊗ I■)✈❡❝(❳) + (I

❑ ⊗ P❋)✈❡❝(❳) − (P

❯ ⊗ P❋)✈❡❝(❳)

✈❡❝(ˆ ❳(❙)) = P(❙) ✈❡❝(❳) P(❙)

■❑×■❑

= (P

❯ ⊗ I■) + (I

❑ ⊗ P❋) − (P

❯ ⊗ P❋)

  • ◆✉♠❜❡r ♦❢ ✐♥❞❡♣❡♥❞❡♥t ♣❛r❛♠❡t❡rs✿

tr

  • P(❙)

= ❙ × ■ + ❑ × ❙ − ❙✷

  • ❉❞❧ r❡s✐❞✉❛❧s✿ tr
  • I■❑ − P(❙)

= ■❑ − (❙■ + ❑❙ − ❙✷) ˆ σ✷

❝♦r =

||❳ − ˆ ❋ˆ ❯′||✷ ■❑ − (■❙ + ❑❙ − ❙✷)

✷✼ ✴ ✸✺

slide-53
SLIDE 53

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❆♣♣r♦①✐♠❛t✐♦♥s ✭❏♦ss❡ ✫ ❍✉ss♦♥✱ ✷✵✶✶✮

ˆ ①−✐❦

✐❦

− ①✐❦ ≃ ˆ ①✐❦ − ①✐❦ ✶ − P✐❦,✐❦ ❈❱(❙) =

✶ ■❑

  • ✐,❦(①✐❦ − ˆ

①−✐❦

✐❦

)✷ ❆❈❱(❙) = ✶ ■❑

  • ✐,❦

ˆ ①✐❦ − ①✐❦ ✶ − P✐❦,✐❦ ✷

  • ❈❱(❙) = ✶

■❑ ×

  • ✐,❦(ˆ

①✐❦ − ①✐❦)✷ (✶ − tr(P(❙))/■❑)✷

  • 1
2 3 4 5 6 0.4 0.6 0.8 1.0 Number of components Error
  • CV
GCV Smooth

❈❱ ✭✻✵✵ s✮❀ ❆❈❱ ✭✵✳✵✶✾ s✮❀ ●❈❱ ✭✵✳✵✵✻ s✮

✷✽ ✴ ✸✺

slide-54
SLIDE 54

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❆♣♣r♦①✐♠❛t✐♦♥ ✐♥❝♦♠♣❧❡t❡ ❝❛s❡

  • ❈❱ ❝♦♠♣❧❡t❡(❙) =

■❑❳ − ˆ ❋ˆ ❯′✷ (■❑ − (■❙ + ❑❙ − ❙✷))✷ ⇒ ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ✐♥ t❤❡ ✐♥❝♦♠♣❧❡t❡ ❝❛s❡

  • ❈❱ ✐♥❝♦♠♣❧❡t❡(❙) =

■❑❲ ∗ (❳ − ˆ ❋ˆ ❯′)✷ (■❑ − ♥❜ ♠✐ss✐♥❣ − (■❙ + ❑❙ − ❙✷))✷

✷✾ ✴ ✸✺

slide-55
SLIDE 55

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❖✉t❧✐♥❡

✶ ■♥tr♦❞✉❝t✐♦♥ ✷ P♦✐♥t ❡st✐♠❛t❡s ♦❢ t❤❡ P❈❆ ❛①❡s ❛♥❞ ❝♦♠♣♦♥❡♥ts ✸ ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ✐♥ P❈❆ ✹ ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ✐♥ P❈❆ ✺ ▼✉❧t✐♣❧❡ ❈♦rr❡s♣♦♥❞❡♥❝❡ ❆♥❛❧②s✐s ✻ ❈♦♥❝❧✉s✐♦♥

✸✵ ✴ ✸✺

slide-56
SLIDE 56

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❘❡❣✉❧❛r✐③❡❞ ✐t❡r❛t✐✈❡ ▼❈❆ ✭❏♦ss❡ ❡t ❛❧✳✱ ✷✵✶✷✮

⇒ P❈❆ ♦♥ t❤❡ ✐♥❞✐❝❛t♦r ♠❛tr✐① ✇✐t❤ s♣❡❝✐✜❝ r♦✇s ❛♥❞ ❝♦❧✉♠♥s ✇❡✐❣❤ts

  • 1
  • 1 0 0 1 0 0 1 ... 0 1

1 0 0 1 0 1 0 ... NA NA

NA NA NA 0 1 0 0 ... 0 1

1 0 0 1 0 0 1 ... 0 1 0 0 1 NA NA 0 ... 0 1 1 0 0 1 0 0 1 ... 0 1

  • ■♥✐t✐❛❧✐③❛t✐♦♥✿ ✐♠♣✉t❛t✐♦♥ ♦❢ t❤❡ ✐♥❞✐❝❛t♦r ♠❛tr✐① ✭♣r♦♣♦rt✐♦♥✮
  • ❊st✐♠❛t✐♦♥ ♦❢ ˆ

❋ℓ, ˆ ❯ℓ✿ ▼❈❆ ♦♥ t❤❡ ❝♦♠♣❧❡t❡❞ ✐♥❞✐❝❛t♦r ♠❛tr✐①

  • ■♠♣✉t❛t✐♦♥ ♦❢ t❤❡ ♠✐ss✐♥❣ ✈❛❧✉❡s ✇✐t❤ t❤❡ ♠♦❞❡❧ ♠❛tr✐①
  • ❈♦❧✉♠♥ ♠❛r❣✐♥s ❛r❡ ✉♣❞❛t❡❞

✸✶ ✴ ✸✺

slide-57
SLIDE 57

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❘❡❣✉❧❛r✐③❡❞ ✐t❡r❛t✐✈❡ ▼❈❆ ✭❏♦ss❡ ❡t ❛❧✳✱ ✷✵✶✷✮

⇒ ❚❤❡ ❛❧❣♦r✐t❤♠ r❡t✉r♥s t❤❡ s❝♦r❡s ❛♥❞ ❧♦❛❞✐♥❣s ⇒ ❚❤❡ ❛❧❣♦r✐t❤♠ r❡t✉r♥s ❛ ❝♦♠♣❧❡t❡❞ ✐♥❞✐❝❛t♦r ♠❛tr✐①

V1 V2 V3 … V14 V1_a V1_b V1_c V2_e V2_f V3_g V3_h … ind 1 a NA g … u ind 1 1 0.71 0.29 1 … ind 2 NA f g u ind 2 0.12 0.29 0.59 1 1 … ind 3 a e h v ind 3 1 1 1 … ind 4 a e h v ind 4 1 1 1 … ind 5 b f h u ind 5 1 1 1 … ind 6 c f h u ind 6 1 1 1 … ind 7 c f NA v ind 7 1 1 0.37 0.63 … … … … … … … … … … … … … … … ind 1232 c f h v ind 1232 1 1 1 …

⇒ ■♠♣✉t❡❞ ✈❛❧✉❡s ❝❛♥ ❜❡ s❡❡♥ ❛s ❞❡❣r❡❡ ♦❢ ♠❡♠❜❡rs❤✐♣

✸✷ ✴ ✸✺

slide-58
SLIDE 58

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❖✉t❧✐♥❡

✶ ■♥tr♦❞✉❝t✐♦♥ ✷ P♦✐♥t ❡st✐♠❛t❡s ♦❢ t❤❡ P❈❆ ❛①❡s ❛♥❞ ❝♦♠♣♦♥❡♥ts ✸ ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ✐♥ P❈❆ ✹ ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ✐♥ P❈❆ ✺ ▼✉❧t✐♣❧❡ ❈♦rr❡s♣♦♥❞❡♥❝❡ ❆♥❛❧②s✐s ✻ ❈♦♥❝❧✉s✐♦♥

✸✸ ✴ ✸✺

slide-59
SLIDE 59

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❈♦♥❝❧✉s✐♦♥

⇒ ▼✐ss✐♥❣ ✈❛❧✉❡s ✐♥ ♣r✐♥❝✐♣❛❧ ❝♦♠♣♦♥❡♥ts ♠❡t❤♦❞s ▼✐ss✐♥❣ ✈❛❧✉❡s ✐♥ ♠✉❧t✐✲t❛❜❧❡s ♠❡t❤♦❞s✿ ❣r♦✉♣s ♦❢ ✈❛r✐❛❜❧❡s ✭▼✉❧t✐♣❧❡ ❋❛❝t♦r ❆♥❛❧②s✐s✮❀ ❣r♦✉♣s ♦❢ ✐♥❞✐✈✐❞✉❛❧s ✭▼✉❧t✐❧❡✈❡❧ s✐♠✉❧t❛♥❡♦✉s ❝♦♠♣♦♥❡♥t ❛♥❛❧②s✐s ❏♦ss❡ ❡t ❛❧✳ ❙✉❜♠✐tt❡❞✮ ⇒ ❘ ♣❛❝❦❛❣❡ ♠✐ss▼❉❆

♥❜ ❁✲ ❡st✐♠❴♥❝♣P❈❆✭♦r❛♥❣❡✮ r❡s✳❝♦♠♣ ❁✲ ✐♠♣✉t❡P❈❆✭♦r❛♥❣❡✱♥❝♣❂✷✮ r❡s✳♣❝❛ ❁✲ P❈❆✭r❡s✳❝♦♠♣✩❝♦♠♣❧❡t❡❖❜s✮ r❡s▼■ ❁✲ ▼■P❈❆✭♦r❛♥❣❡✱♥❝♣❂✷✮

✸✹ ✴ ✸✺

slide-60
SLIDE 60

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

P❡rs♣❡❝t✐✈❡s ✲ ✇♦r❦ ✐♥ ♣r♦❣r❡ss

  • ■♠♣✉t❛t✐♦♥ ❜❛s❡❞ ♦♥ ♣r✐♥❝✐♣❛❧ ❝♦♠♣♦♥❡♥ts ♠❡t❤♦❞s✿
  • s✐♥❣❧❡ ✐♠♣✉t❛t✐♦♥✿ ❝♦♥t✐♥✉♦✉s ✲ ❝❛t❡❣♦r✐❝❛❧ ✲ ♠✐①❡❞ ❞❛t❛
  • ♠✉❧t✐♣❧❡ ✐♠♣✉t❛t✐♦♥
  • ❘❡❣✉❧❛r✐③❛t✐♦♥ ✐♥ t❤❡ ❝♦♠♣❧❡t❡ ❢r❛♠❡✇♦r❦
  • ❇❛②❡s✐❛♥ tr❡❛t♠❡♥t ♦❢ s✉❝❤ ♠♦❞❡❧s

✸✺ ✴ ✸✺

slide-61
SLIDE 61

■♥tr♦❞✉❝t✐♦♥ P♦✐♥t ❡st✐♠❛t❡s ❈♦♥✜❞❡♥❝❡ ❛r❡❛s ◆✉♠❜❡r ♦❢ ❞✐♠❡♥s✐♦♥s ▼❈❆ ❈♦♥❝❧✉s✐♦♥

❚❤❛♥❦ ②♦✉ ❢♦r ②♦✉r ❛tt❡♥t✐♦♥ ▼❡rs✐ ❜r❛s

✸✻ ✴ ✸✺