B u i l d i n g L i n u x d i s t r i b u t i - - PowerPoint PPT Presentation
B u i l d i n g L i n u x d i s t r i b u t i o n p a c k a g e s w i t h D o c k e r B r u n o C o r n e c H P E E M E A E G P r e s a l e s S t r a t e g i s t W W
v 2 . – O c t
e r 2 1 6
» 1 5 + y e a r s
s u c c e s s , w
l d w i d e p r
r a m s , i n c l u d i n g C l
d C e n t e r
E x c e l l e n c e , B i g D a t a C e n t e r
E x c e l l e n c e , O p e n S
r c e S
u t i
s I n i t i a t i v e , R I S C t
P I n t e l A r c h i t e c t u r e M i g r a t i
s , N V F C e n t e r
E x c e l l e n c e , E M E A N e t w
k i n g C u s t
e r V i s i t C e n t e r a n d m
e » C
p l e t e I T ( 4 + s y s t e m s , 3 + n e t w
k p
t s , 5 + T B s t
a g e ) » P
t f
i
4 + r e a d y t
e m
u t i
s w i t h a c c e s s t
r e c
y s t e m
P a r t n e r s » C
p l e t e t e s t & v a l i d a t i
e n v i r
m e n t » S t r a t e g i c p a r t n e r s h i p w i t h I n t e l , 1 5
e a r l
g s t a n d i n g c
l a b
a t i
» S t r a t e g i c p a r t n e r s h i p w i t h R e d H a t 7
e a r c
l a b
a t i
( O S S I ) » A u n i q u e p r
p
n t i n t h e i n d u s t r y w i t h a p r
e n s e r v i c e
e r i n g
Grenoble
M i s s i
: A c c e l e r a t e t h e a d
t i
n e w a n d i n n
a t i v e s
u t i
s b y c r e a t i n g s i m p l e a n d r e w a r d i n g e n d
n d c u s t
e r e x p e r i e n c e s t h a t b e n e f i t
r c u s t
e r s a n d p a r t n e r s , i n a c
p e l l i n g a n d e n g a g i n g c
l a b
a t i v e e n v i r
m e n t . … m
e i n f
m a t i
a v a i l a b l e a t h t t p : / / w w w . h p i n t e l c
n e t
W
k s h
P
L i v e d e m
3
t w a r e e n g i n e e r i n g a n d U n i c e s s i n c e 1 9 8 8 :
–
M
t l y C
f i g u r a t i
M a n a g e m e n t S y s t e m s ( C M S ) , B u i l d s y s t e m s , q u a l i t y t
s ,
m u l t i p l e c
m e r c i a l U n i x s y s t e m s
–
D i s c
e r e d O p e n S
r c e & L i n u x ( O S L ) & m a d e f i r s t c
t r i b u t i
s i n 1 9 9 3
–
F u l l t i m e
O S L s i n c e 1 9 9 5 , f i r s t a s H P r e s e l l e r t h e n @ H P
u r r e n t l y :
–
O S L T e c h n
y S t r a t e g i s t , E M E A E G I n n
a t i
S
u t i
C e n t e r a k a H P / I n t e l S
u t i
C e n t e r , G r e n
l e
–
H P O S L A d v
a t e a n d C
v e r g e d I n f r a s t r u c t u r e A m b a s s a d
–
W W L i n u x C
m u n i t y L e a d f
t h e H P O p e n S
r c e P r
e s s i
–
P O S S c
f e r e n c e , O p e n S t a c k . f r a n d A F U L b
r d m e m b e r . C
f e r e n c e s a t W W l e v e l a t L i n u x C
, L i n u x . c
f . a u , . . .
–
M
d
e s c u e , P r
e c t
u i l d e r .
g , U U W L a n d P U S K P r
e c t L e a d
–
L i n u x C O E , m r e p
t e l l i c
r i n s e , f
s
y , c
l e c t l , I r
i c c
t r i b u t
–
F O S S B a z a a r / S P D X a n d O S L G
e r n a n c e e n t h u s i a s t
–
M a n d r i v a , M a g e i a , F e d
a p a c k a g e r
n d a l s
–
A m a t e u r s i n g e r ( A l t
T e n
) , r e c
d e r p l a y e r s i n c e 1 9 7 6 a n d C h
r d i r e c t
s i n c e 1 9 8 7 , C D c
l e c t
( 6 + ) , C
c e r t s , P h
r a p h y
V e r s i
c
t r
l e d P e e r r e v i e w e d A u t
a t e d t e s t s ( l
s )
Z u u l N
e p
C h a n g e i n
x e c u t a b l e c
e
f i g u r a t i
n f r a / e n v i r
m e n t
a t a
i t
i n g
C h a n g e i n
x e c u t a b l e c
e
f i g u r a t i
n f r a / e n v i r
m e n t
a t a
i t
i n g
P r
e c t
u i l d e r .
g
10/17/16
10/17/16
7 1 9 8 4 – G N U / F S F P r
e c t
. S t a l l m a n 1 9 9 1
i n u x
L . T
v a l d s
1 9 9 6 – S u S E & Y a s t –
F l
i a n L a R
h e
1 9 9 3 – S l a c k w a r e –
P a t r i c k V
k e r d i n g
1 9 9 3 – R e d H a t L i n u x
M a r c E w i n g
1 9 9 7 – R e d H a t P a c k a g e M a n a g e r
E r i k T r
n & M a r k E w i n g
1 9 9 3 – D e b i a n P a c k a g e 2 3 – Y U M
e t h V i d a l
1 9 9 6 – D e b i a n G N U / L i n u x
I a n M u r d
k
2 3 – F e d
a
W a r r e n T
a m i
1 9 9 8 – A d v a n c e d P a c k a g i n g T
B r i a n W h i t e
2 4 – U b u n t u
M a r k S h t u t t l e w
t h
1 9 9 2 – S L S –
P e t e r M c D
a l d
2 1 – S L E S 2 2 – R H E L 2 5 – O p e n S U S E 2 1 – M a g e i a
A n n e N i c
a s
2 1 5 – D N F
t w a r e P a c k a g e :
p p l i c a t i
s t
e d w i t h i t s m e t a d a t a a n d b u i l d r e c e i p t i n a n a r c h i v e f
m a t .
r
i d e s d e p e n d e n c y i n f
m a t i
a t b u i l d a n d i n s t a l l t i m e
a c k a g e f
m a t :
i n u x p r
i d e s m u l t i p l e f
m a t : r p m , d e b , t g z , i p k g , . . .
p e n , b a s e d
t
l i k e c p i
s s
i a t e d w i t h d i s t r i b u t i
f a m i l i e s .
a c k a g e m a n a g e r :
u t
a t e s p a c k a g e s i n s t a l l a t i
, u p g r a d e , c
f i g u r a t i
, a n d r e m
a l i n a c
s i s t e n t m a n n e r .
a n a g e s p a c k a g e d e p e n d e n c i e s t
n s t a l l e a s i l y f r
t
t r e e
a c k a g e r e p
i t
y :
t
a g e l
a t i
f r
w h i c h s
t w a r e p a c k a g e s a r e r e t r i e v e d f
i n s t a l l a t i
/ u p d a t e
a n a g e s r e p
i t
y m e t a d a t a , i n c l u d i n g d e p e n d e n c i e s
t i n u
s P a c k a g i n g :
v e r y s
t w a r e c
p
e n t i s m a n a g e d u s i n g s
t w a r e p a c k a g e s
a c k a g e b u i l d i s d
e
t h e f l y , a s t h e s
t w a r e i s d e v e l
e d
a r . g z f
m a t a d v a n t a g e s :
e l a t i v e l y e a s y t
a n d l e
t a b l e
n l y 2 t
s n e e d e d ( t a r a n d g z i p )
a n i n t e g r a t e s
e f i l e s f
m e t a d a t a
a r . g z f
m a t d r a w b a c k s :
e p
i t
y m a n a g e m e n t
e p e n d e n c y m a n a g e m e n t
a s y u p d a t e m e c h a n i s m
i g n a t u r e s u p p
t
i m i t e d c h e c k s u m s u p p
t
a c k a g e d a t a b a s e
P M / d e b f
m a t a d v a n t a g e s
t a b l e
i n a r y a n d s
r c e f
m a t s a v a i l a b l e w / m u l t i a r c h s u p p
t
a t i v e s u p p
t f
L S B / F H S
r
i d e s m e t a d a t a , b u i l d p r
e d u r e , p a t c h e s a n d u p s t r e a m c
t e n t
a n a g e s i n s t a l l a t i
, u p g r a d e , r e m
a l
i g n a t u r e / C h e c k s u m s u p p
t a n d v e r i f i c a t i
e p l
m e n t s e r v e r a v a i l a b i l i t y – S c r i p t e d m e t h
s
a s e l i n e s u p p
t
P M p l a c e s e v e r y t h i n g i n t h e . s p e c f i l e a n d s u p p
t s s u b p a c k a g e s
P M P a c k a g e d a t a b a s e a v a i l a b l e t
u e r y m e t a d a t a
P M / d e b f
m a t d r a w b a c k s
e q u i r e a p p r
r i a t e t
s b u t i n d i s t r
t a b i l i t y a c r
s O S e s
p m b u i l d
u i l d s r c . r p m a n d a r c h . r p m p a c k a g e s f r
t h e S P E C f i l e
a k e i n a c c
n t c
f i g f i l e s , c r
j
s , i n i t s c r i p t s , l
r
a t i
, s h e l l c
f i g
p m b u i l d
a p k g . s p e c
O N O T B U I L D A S r
i g n i n g R P M s
n s u r e s a u t h e n t i c i t y
t h e p r
i d e r a n d p a c k a g e i n t e g r i t y
e q u i r e s G P G c
f i g u r a t i
a n d m a c r
i n $ H O M E / . r p m m a c r
p m
d d s i g n p k g . s r c . r p m p k g . a r c h . r p m
p m l i n t
h e c k r p m p a c k a g e c
m
e r r
s w r t d i s t r i b u t i
p
i c i e s
p m l i n t p k g . s r c . r p m p k g . a r c h . r p m
r e a t e r e p
e p a r a t e c
m a n d ( n
a y u m
t i
)
r e a t e a y u m r e p
i t
y f r
a d i r e c t
y w i t h p a c k a g e s
r e a t e r e p
a v e a w
k i n g i n s t a l l a t i
p r
e d u r e
s e c
f i g u r e i f p
s i b l e
l a n g u a g e b u i l d t
s ( s e t u p . p y , M a k e f i l e . P L , . . . )
a v e a f i l e b a s e d i n s t a l l w
k i n g t a r g e t i n g / u s r / l
a l
s e v a r i a b l e s f
a l l t a r g e t d i r e c t
i e s ( / e t c , / u s r / s h a r e , / u s r / b i n , / u s r / l i b , . . . )
c r i p t t h e b u i l d a n d i n s t a l l p h a s e s i f n e c e s s a r y t
h a r e b e t w e e n v a r i
s t
s
n
y
r p a c k a g e d e l i v e r a b l e s
n
w h a t y
w a n t t
e l i v e r a n d w h e r e , w h a t i s
t i
a l . P a c k a g e a c c
d i n g l y
n
y
r e x t e r n a l d e p e n d e n c i e s
r c e c
p
e n t s s h
l d h a v e t h e i r
n s e p a r a t e d p a c k a g e s
v
d i n c l u d i n g
h e r p r
e c t s c
e i n l i n e . U s e d e p e n d e n c y
r e
a c k a g e s e p a r a t e l y i f f
k n e e d e d .
e n e r a t e r e p
i t
i e s t
a s e y
r c
s u m e r s ' l i f e
e c i d e
a l i c e n s e
d e l i v e r y i s a t r e e
p a c k a g e s
n c r e a s i n g n u m b e r
p a c k a g e s r e d u c e s b u i l d t i m e
t h e l
g r u n
n c r e a s e c
p l e x i t y a t p a c k a g e d e f i n i t i
, n
a t i n s t a l l t i m e , t h a n k s t
a c k a g e m a n a g e r s
e c i d e w h e t h e r y
w a n t m e t a
a c k a g e s ( p r j
l l , p r j
e t , p r j
a p e , p r j
a t a , . . . )
– A p p l i c a t i
s i n a z
e a r e i s
a t e d f r
t h e
h e r s ( c h r
s t e r
d s )
e c u r i t y ( a s s e c u r e a s y
r k e r n e l )
a m e s p a c e s ( r
, U I D , G I D , n e t w
k , P I D , I P C , m
n t p
n t s , h
t n a m e / u t s )
g r
p G r a n u l a r i t y
i n g l e O S i m a g e m a n a g e s H W a c c e s s e s
e r f
m a n c e & t r a n s p a r e n c y n e i t h e r e m u l a t i
n
f u l l v i r t u a l i z a t i
e t f i l t e r f
n e t w
k i s
a t i
( N A T a n d p
t f w d )
u F S
e r l a y s i s
a t e d f i l e s y s t e m s
t
a p h y s i c a l f i l e s y s t e m
– O t h e r t e c h n
a v a i l a b l e
e r v e r
i r t u
z
p e n V Z
h t t p s : / / b l
. d
k e r . c
/ w p
t e n t / u p l
d s / 2 1 4 / 3 / d
k e r
x e c d r i v e r
i a g r a m . p n g
i s i
: B u i l d , S h i p , a n d R u n A n y A p p A n y w h e r e
h : a c
p a n y a n d a n
e n s
r c e e c
y s t e m ( u n d e r t h e A p a c h e l i c e n s e V 2 . s i n c e 2 1 3 )
k e r i s a t
c h a i n w r i t t e n i n G
h a t s i m p l i f i e s t h e c r e a t i
a n d m a n a g e m e n t
c
t a i n e r s .
a r a d i g m s h i f t : “ n e w ” p a c k a g i n g m
e l f
d e p l
i n g a p p l i c a t i
s a n d s e r v i c e s u s i n g L i n u x c
t a i n e r s
( G
l e h a s b e e n d
n g t h i s f
y e a r s ; 2 b i l l i
/ w e e k )
t a i n e r s : A s e l f
t a i n e d p
t a b l e e n v i r
m e n t f
p a c k a g i n g , d e p l
i n g , a n d e x e c u t i n g a p p l i c a t i
s a n d s e r v i c e s . C
t a i n s a l l e x e c u t i
d e p e n d e n c i e s f
a s e r v i c e ( s i n g l e p r
e s s
s i n g l e c
t a i n e r )
e t t e r r e s
r c e u t i l i z a t i
: V M s v i r t u a l i z e t h e C P U , c
t a i n e r s v i r t u a l i z e p r
e s s ( e s ) ( l i g h t w e i g h t )
i m p l i f i e d A p p l i c a t i
L i f e c y c l e M a n a g e m e n t :
– B
u i l d a n d c
f i g u r e
c e ( i n t e g r a t e d D e v O p s )
– D
e p l
a n y w h e r e ( l a p t
, s e r v e r , c l
d , … )
– I
T f
u s e s
m a n a g i n g t h e b a s e i n f r a s t r u c t u r e
a l u e p r
– R
e l i a b l e d e p l
m e n t
– M
e e fg i c i e n t d e p l
m e n t
– R
e d u c e d d e p l
m e n t l a t e n c y
– M
e e fg i c i e n t u s e
s y s t e m r e s
r c e s
S
H y k e s , D
k e r I n c .
I m a g e s L
a l
r e m
e r e f e r e n c e c
t e n t t
n i t i a t e a c
t a i n e r M u l t i p l e i m a g e s c a n b e l a y e r e d a d d i n g c
t e n t a t e a c h t i m e u s i n g C
y
W r i t e F S C a c h e t
p e e d u p r e p e a t e d
e r a t i
s C
t a i n e r s L a s t l a y e r p r
i d i n g r w a c c e s s t
h e c u m u l a t e d s e t
i m a g e s
1 a p p l i c a t i
+ i t s d e p s = = 1 c
t a i n e r
C
t a i n e r l i k e V M s b r i n g s i s
a t i
N
l u t i
y
r r u n n i n g e n v i r
m e n t E a s i l y s c r a t c h a n d r e d
f p r
l e m s E a s i e r r e f i n e m e n t & a u t
a t i
t h e b u i l d e n v i r
m e n t w i t h t h e D
k e r f i l e C
t a i n e r s l i k e V M s b r i n g s m u l t i
i s t r i b u t i
s u p p
t E a s y t
u i l d f
a n
h e r d i s t r i b u t i
t h a n y
r s U s e f u l a l s
y
r
n d i s t r
n
e v e r y b
y u s e s a n u n s t a b l e d i s t r
t a i n e r s c a n u s e n a t i v e l y y
r h
e d i r e c t
y A l l
s h a r i n g
y
r p a c k a g e s
r c e s f
l
a l a n d i n c
t a i n e r b u i l d A l l
s h a r i n g
y
r . r p m m a c r
, . r p m r c f i l e s , M a g e i a S S H k e y s
F e d
a c e r t s V M s a r e m a n d a t
y i s y
n e e d a d i fg e r e n t k e r n e l
M y c
p u t e r L
a l D
k e r E n g i n e
Images
Containers D
k e r f i l e s Mageia Cauldron Mageia 5 ... Fedora Rawhide Fedora 24 ... Mageia Cauldron Mageia 5 ... Fedora Rawhide Fedora 24 ...
D i s t r i b u t i
R e p
i t
y
S V N / G i t s
r c e s P a c k a g e m n g t
Docker registry
#!/bin/bash mkdir -p /tmp/docker-mageia cd /tmp/docker-mageia RD="/home" WD="$RD/bruno/Maison/bruno/prj/mageia/" cat > Dockerfile << EOF FROM juanluisbaptiste/mageia-cauldron:latest MAINTAINER bcornec@mageia.org RUN urpmi.update -a -c -f RUN urpmi --auto --auto-select --no-recommends RUN urpmi --auto bm subversion mgarepo colordiff sudo RUN sed -i 's/users:x:.*$/users:x:501/' /etc/group RUN useradd bruno -u 600 -g 501 -N -M -d $RD/bruno RUN echo "bruno ALL=NOPASSWD:/sbin/urpmi" >> /etc/sudoers WORKDIR $WD USER bruno CMD /bin/bash EOF docker build --file=Dockerfile -t pb:mageiabuild . if [ $? -eq 0 ]; then docker run -v $RD/bruno:$RD/bruno -ti pb:mageiabuild fi
10/17/16
10/17/16
P a c k a g i n g s h
l d b e a p r
e c t c
c e r n a s w e l l a s c
i n g , t e s t i n g , i n s t a l l i n g , . . . . e s p e c i a l l y f
s m a l l e r p r
e c t s P a c k a g i n g a s y
r
l y w a y
d e l i v e r y ( n
a d r e a m ) M i n i m a l
e r h e a d , m a x i m u m b e n e f i t : C
s i s t a n c y a n d r e p r
u c e a b i l i t y f
d e v s a n d u s e r s D i s t r i b u t i
& d e p l
m e n t s e r v e r i n t e g r a t i
, I m p r
e d d e p l
m e n t w i t h
t r i s k
s c r e w i n g u p t h e s y s t e m P a c k a g i n g a s a m a r k e t i n g a c t i v i t y f
t h e u p s t r e a m p r
e c t . E a s y w a y t
x t e n d y
r u s e r b a s e , a n d i m p r
e y
r c
m u n i t y r e l a t i
s h i p a n d i s a “ c
p e t i t i v e a d v a n t a g e ” . N e w m a n t r a : “ P a c k a g e e a r l y , p a c k a g e a l w a y s ” T H E S O L U T I O N I S I N D E E D C O N T I N U O U S P A C K A G I N G ( w h a t e v e r t h e t
)
10/17/16
10/17/16
s t
10/17/16
10/17/16
P r
e c t
u i l d e r p r
i d e s a d d i t i
a l g
i e s E a s y V M s / V E s / R M s i n s t a l l a t i
/ s e t u p . U p d a t e s n
m a n d a t
y . M a c r
y s t e m w i t h p e r l v a r i a b l e s t
v
d d u p l i c a t i
m e t a d a t a S k e l e t
g e n e r a t i
t
e l p s t a r t i n g M a n a g e s p a c k a g e d e l i v e r y u p t
r r e p
i t
y ( s s h b a s e d ) w i t h r e p
i t
y m a n a g e m e n t ( y u m , a p t , u r p m i ) I n t e g r a t i
t e s t s i n t h e p r
e s s M a n a g e s p a t c h e s / a d d i t i
a l s
r c e s w h e n n
u p s t r e a m C h e c k s v a l i d i t y
p a c k a g e s b u i l t ( l i n t i a n , r p m l i n t ) E a s y c r e a t i
n e w v e r s i
s f
u p s t r e a m m a n a g e m e n t M a n a g e s w e b s i t e d e l i v e r y , a n n
n c e s
m a i l i n g
i s t s
10/17/16
–
–
–
10/17/16
10/17/16
h t t p : / / w w w . p r
e c t
u i l d e r .
g
h t t p : / / w w w . m
d
e s c u e .
g / s y m p a
h t t p : / / t r a c . p r
e c t
u i l d e r .
g / b r
s e r / p r
e c t s /
h t t p s : / / b r u n
n e c . w
d p r e s s . c
/ 2 1 5 / 1 1 / 2 5 / p r
e c t
u i l d e r
g
2
s
t
n d
3
i l l
e
/
10/17/16
P r
e c t
u i l d e r .
g i s m
t l y s u i t e d f
u p s t r e a m p r
e c t s w a n t i n g t
a c k a g e t h e i r a p p l i c a t i
s D i s t r i b u t i
s p r
i d e e a c h t h e i r b u i l d t
s
u S E : O p e n B u i l d S e r v i c e ( M u l t i d i s t r
W e b b a s e d , B a a S )
e d
a ( K
i )
a n d r i v a / M a g e i a ( Y
r i , m g a r e p
. . ) O t h e r c
p l e m e n t a r y t
s :
u i l d b
a r a l l e l : : F
k M a n a g e r , D B I , D B : : S Q L i t e , F i l e : : M i m e I n f
M a i l : : S e n d m a i l
D e p l
i n t e r n a l l y P a r t n e r E m b e d C
t r i b u t e I P P a r t i c i p a t e H e l p c u s t
e r s
10/17/16
2 5 y e a r s
d 2 y e a r s
d
” C h a n g e s a r e n e v e r e a s y t
a k e . T h e r e i s c
f
t a n d s a f e t y i n t r a d i t i
, b u t c h a n g e m u s t c
e , n
a t t e r h
p a i n f u l
e x p e n s i v e i t m a y b e . ” B i l l H e w l e t t
B r u n
C
n e c @ h p e . c
( O p e n S
r c e a n d L i n u x T e c h n
y S t r a t e g i s t a t t h e H P / I n t e l S
u t i
C e n t e r ) h t t p : / / d
n l
d s . l i n u x . h p e . c
/ L i n u s T
v a l d s , R i c h a r d S t a l l m a n , E r i c R a y m
d , N a t M a k a r e v i t c h , R e n é C
g n e n c , E r i c D u m a s , R é m y C a r d , B d a l e G a r b e e , B r y a n G a r t n e r , C r a i g L a m p a r t e r , L e e M a y e s , G a l l i g R e n a u d , A n d r e e L e i d e n f r
t , P h i l R
b , B
G
e i l l e , M a r t i n M i c h l m a y r a m
g
h e r s , f
t h e i r w
k a n d d e v
i
t
h e O p e n S
r c e S
t w a r e c a u s e . . . a n d m y f a m i l y f
t h e i r p a t i e n c e :