mo z i l l a I n t r o d u c t i o n D a a l a - - PowerPoint PPT Presentation

D a a l a : A P e r c e p t u a l l y

• D

r i v e n S t i l l P i c t u r e C

• d

e c

J e a n

• M

a r c V a l i n , N a t h a n E . E g g e , T h

• ma

s J . D a e d e , T i mo t h y B . T e r r i b e r r y , C h r i s t

• p

h e r M

• n

t g

• me

r y

I C I P 2 1 6 h t t p s : / / j m v a l i n . c a / s l i d e s / i c i p 2 1 6 _ s l i d e s . p d f

mo z i l l a

I n t r

• d

u c t i

• n
• D

a a l a i s a R

• y

a l t y

• f

r e e v i d e

• c
• d

e c

• R

e p l a c e s t r a d i t i

• n

a l c

• d

i n g t

• l

s w i t h n e w / u n c

• mmo

n

• n

e s

• I

n t r a f r a me s u s e d a s s t i l l p i c t u r e c

• d

e c

– E

v a l u a t e d a t P C S 2 1 5

– S

i g n i fi c a n t l y i mp r

• v

e d s i n c e t h e n

D a a l a T e c h n i q u e s

• L

a p p e d t r a n s f

• r

ms

– 4

x 4 t

• 6

4 x 6 4 D C T s , 4

• p
• i

n t l a p p i n g

• M

u l t i

• s

y mb

• l

a r i t h me t i c c

• d

i n g

– A

l p h a b e t s i z e u p t

• 1

6 ( f e w e r s y mb

• l

s t

• c
• d

e )

• P

e r c e p t u a l v e c t

• r

q u a n t i z a t i

• n

( P V Q )

– G

a i n

• s

h a p e q u a n t i z a t i

• n

w i t h s p h e r i c a l q u a n t i z e r

– S

i g n a l

• f

r e e a c t i v i t y ma s k i n g

• C

h r

• ma

f r

• m

l u ma ( C f L ) p r e d i c t i

• n
• D

e r i n g i n g fi l t e r

P C S 2 1 5

• D

i d w e l l

• n

e s

• me

i ma g e s

• N
• t

s

• w

e l l

• n
• t

h e r s

0.25 bpp

I m p r

• v

e m e n t s S i n c e P C S 2 1 5

• N

e w d e r i n g i n g fi l t e r

• F

i n e r c h r

• ma

q u a n t i z a t i

• n
• L

a p p i n g r e d u c e d t

• 4

p

• i

n t s

• 6

4 x 6 4 D C T

• R

e d u c e d

• v

e r h e a d e n t r

• p

y c

• d

e r

D e r i n g i n g F i l t e r D e s i g n G

• a

l s

• S

mo

• t

h

• u

t r i n g i n g a r t i f a c t s

• P

r e s e r v e e d g e s a n d t e x t u r e

• H

a v e r e a s

• n

a b l e c

• mp

l e x i t y

– B

e e a s y t

• v

e c t

• r

i z e ( S I M D )

• O

r i g i n a l l y d e s i g n e d f

• r

v i d e

D e r i n g i n g F i l t e r O v e r v i e w

• C
• mp

u t e d

• n

c

• d

e d 8 x 8 b l

• c

k s

• C
• n

d i t i

• n

a l r e p l a c e me n t fi l t e r

• D

i r e c t i

• n

a l 3 5

• t

a p s e p a r a b l e fi l t e r

• D

e c

• d

e r

• s

i d e d i r e c t i

• n

e s t i ma t i

• n

( n

• s

i g n a l i n g )

• F

i l t e r s t r e n g t h s i g n a l e d

• n

c

• d

e d s u p e r b l

• c

k s ( 6 4 x 6 4 )

C

• n

d i t i

• n

a l R e p l a c e m e n t F i l t e r

• F
• r

e a c h fi l t e r e d p i x e l

– R

e p l a c e t a p v a l u e s t

• d

i s s i mi l a r t

• c

e n t e r p i x e l

– m

a s k

i , j

: = | t a p

i , j

– c e n t e r

i

| < T

– I

F m a s k

i , j

= T H E N t a p

i , j

: = c e n t e r

i

26 8 22 25 24 23 80 R e p l a c e me n t ma s k f

• r

T = 5 1 17 3 1 2 55 26 25 22 25 24 23 25 A v e r a g e = 2 9 A v e r a g e = 2 4 I n p u t I n p u t a f t e r r e p l a c e me n t F i l t e r e d P i x e l

C

• n

d i t i

• n

a l R e p l a c e m e n t F i l t e r ( c

• n

t )

• E

x p r e s s fi l t e r i n t e r ms

• f

d i f f e r e n c e t

• c

e n t e r

• W

e i g h t n

• r

ma l i z a t i

• n

i s c

• n

s t a n t

• R(x,T)

e a s y t

• c
• mp

u t e

• V

e c t

• r

i z e s c

• mp

l e t e l y

D i r e c t i

• n

a l F i l t e r i n g

• 7
• t

a p fi l t e r a l

• n

g d i r e c t i

• n
• 5
• t

a p fi l t e r a c r

• s

s l i n e s ( l

• w

e r t h r e s h

• l

d )

26 8 22 25 24 23 80 Second filter Effective spatial support Filtered pixel

w e i g h t s : [ 1 2 3 ( 4 ) 3 2 1 ] w e i g h t s : [ 1 1 ( 1 ) 1 1 ]

D i r e c t i

• n

E s t i m a t i

• n
• M

i n i mi z e e r r

• r

b e t w e e n d e c

• d

e d i ma g e a n d d i r e c t i

• n

a l l i n e a v e r a g e s

• F

a s t , v e c t

• r

i z a b l e a l g e b r a i c s i mp l i fi c a t i

• n

s

B e f

• r

e D e r i n g i n g

A f t e r D e r i n g i n g

R e s u l t s

• C
• mp

a r e d t

• P

C S 2 1 5 ( B D

• r

a t e )

– N

e w d e r i n g i n g fi l t e r

– F

i n e r c h r

• ma

q u a n t i z a t i

• n

– L

a p p i n g r e d u c e d t

• 4

p

• i

n t s

– 6

4 x 6 4 D C T

– R

e d u c e d

• v

e r h e a d e n t r

• p

y c

• d

e r

B i k e . 2 5 b p p ( P C S 2 1 5 )

B i k e . 2 5 b p p ( I C I P 2 1 6 )

F u t u r e W

• r

k

• E

x p e r i me n t w i t h i n t r a p r e d i c t i

• n
• I

mp r

• v

e n

• n
• p

h

• t
• g

r a p h i c c

• n

t e n t c

• d

i n g

• A

d d a l p h a c h a n n e l s u p p

• r

t

• S

u p p

• r

t f

• r
• t

h e r c

• l
• r

s p a c e s ( e . g . Y C g C

• )
• D

e fi n e c

• n

t a i n e r f

• r

ma t

• A

d d r e s s r e s u l t s f r

• m

I C I P 2 1 6 G r a n d C h a l l e n g e

C

• n

c l u s i

• n
• D

a a l a c

• u

l d b e a g

• d

s t a r t i n g p

• i

n t f

• r

a r

• y

a l t y

• f

r e e s t i l l i ma g e c

• d

e c

Questions?