请选择 进入手机版 | 继续访问电脑版

IT运维管理,ITIL,ITSS,ITSM,ISO20000-ITIL先锋论坛

 找回密码
 微信、QQ、手机号一键注册

扫描二维码登录本站

QQ登录

只需一步,快速开始

艾拓先锋
搜索
查看: 243|回复: 0

教您如何构建自己的 DevOps 流水线(三)

[复制链接]
来自- 美国

参加活动:0

组织活动:0

发表于 2018-11-7 15:53:09 | 显示全部楼层 |阅读模式 来自- 美国
本帖最后由 adminlily 于 2018-11-7 16:24 编辑 ! T; u) x, u& p3 w" b3 @+ z
! k( W  W5 K; j1 v5 S, a
  • Part 1:关于持续交付

    $ I) `3 ^$ q8 J/ i7 [4 [# \

* ~8 s7 f) e5 s

  v3 v9 U) W4 d9 ^* i
  • Part 2:目标

    " q  A$ P& z' c( x4 E; _

) u5 Q) r, F/ {0 \# z8 m8 f# F4 h/ c
* v$ u" P  v4 l0 w3 l, Y  B0 y
  • Part 3:预备步骤
    " x/ G9 K/ o1 b$ h# J4 J$ ^

. s3 o& ~. [8 A' d' w
  • Part 4:实现持续交付流水线
    5 g0 z+ K9 [1 p2 ]8 s

. ?: \% j2 Y7 C6 d: a; W* l. _; s

: e7 `* i# ^" Z. C
  • Part 5:持续交付最佳实践及其他
    9 g$ G+ G+ y0 o
5 }' T5 @9 _' `! s: j+ z8 N7 H
  05
持续交付最佳实践

* `* x$ ]6 t3 u( U2 E

4 R+ }1 k1 M( r& s7 q: [( I
一旦基础就绪并建立好交付流水线,你很可能已经从迭代时间以及快速发布中收益。
2 |' o/ t! ~. B6 i, C

7 r  k; g" L5 ^% i) ^
自动化会取代很多人工任务,环境和发布会变的一致,发布候选者将使用自动路由和自助服务工具在各个流水线阶段中流动。
% W* ]% p6 i) n4 B# i9 |
* {0 j5 b, }" r/ h$ y
你的软件应该近似于时刻处在生产就绪状态,伴随着发布候选人最后从流水线出来的频率远大于从传统途径的频率。每个发布候选者应该增加一批相对较小的改动。

9 P6 K/ J3 j. o( u

, X- I2 M4 P' {
一旦你处于这个阶段,那么你会有更多机会去提升和推进更快的发布周期,而这会使得系统的稳定性更强。
. ]; Y! ~; h' u; L$ M
1 g9 q- R. H* k, R  C- s
下面列举了一些最佳实践:
# o/ `, G% V% P8 T0 {3 e

: |( B% f5 i  a2 f0 x8 ^0 a8 p
实施监控

: w( o! n( B  j0 B( [5 c

0 z9 s% q( ]* @7 I; D, T( `
尽管这份文档讨论的所有事情是描述一个严格的过程去帮助你避免在发布产品的时候出现 bug,但是一旦发布结果显示出系统出现了某种故障,那么收到告急同样显得非常重要。

6 z& d5 D9 ^, K( ~  D* Q' C
: T9 s, {8 I# k
举个例子,如果你的应用在部署结束之后开始抛出告警和异常,那么被直接告之就显得极其重要,这意味着你可以调查和结局。
6 k4 x4 F# T+ I# u( K

& z" t; y& S% L! h2 E- s  }) M8 `: E' ~
理想情况下,这种警示将会以仪表盘或者监控终端的途径传递,比如邮件,文本消息,Slack,或者功能类似的其他途径。
* R* T4 A! K# J& ~4 ^8 ~' V
1 f' n1 q7 T( f# M) [
你可能会需要更加深入而不仅仅是简单的检查错误日志,并且开始监视应用程序正在打印出的日志。
* @1 M; y6 z& U2 t& v/ L
7 u7 `& e4 M. c+ B) |
比如,如果你的购物车完成了在一个发布后下降了 20%,这预示着上一个发布中,可能存在着一个微妙但是非常严重的错误。诸如 StatsD 和 Graphite 之类的开源工具以及通信和浏览分析工具 Google Analytics 会在此帮助到你。
& [4 Z$ a9 X) e3 ~$ B
+ b- C/ s+ c: q5 ]/ k
同样的,这些指标应该在可能的情况下加入到你的监视和警告的仪表盘当中。
! a5 q4 w) R9 ^* y6 p( h# e
: }/ t2 E+ u- v9 \- X: M! \8 f& T
有许多有价值的开源和商业工具可以帮助你智能的去监控你的应用。这些都是值得评估作为一个快速和符合成本效益的手段,支持你的持续交付项目。
. T, Z% f' U; T! B, k
1 c& {' z) G) Y0 @
目标:

. H) N5 I$ U! g; w5 b# ^% e/ i/ C

4 G- u) B, G- Q; Y* g
为了实时监控你的应用,最理想的方法应该是通过可视化的仪表盘

2 |8 i0 h  B+ d7 C! i) u* a: P

; c7 s4 w4 K5 {
追踪应用的关键度量,如果部署出现负面的影响就使其发出警报

2 @8 ~$ h" T; t
" _2 B( _0 @% Y9 }, c+ H) B9 g

1 d. m/ `' ~$ e+ G实现回滚
8 _1 ?9 U# K) u0 h0 L8 |6 q: S& S# X
; ], T& |# e/ m+ R' [5 e' S
使你的生产环境具备快速可靠的回滚是最后的安全网。
+ f# L* A6 B7 _$ T! G7 e

- [2 R4 x1 C$ N2 V& M. }& t

& {0 e: I1 e! N; b9 K5 J7 L9 {: R8 H
如果一个 bug 在你的所有手动和自动的测试中通过,那么回滚将使应用在许多用户受到影响之前快速回到之前可用版本。

. a3 u2 c4 x  k  M

, d; |1 n& ]- g6 A, w) i' k' i
伴随着一个优秀的回滚途径带来的益处,你将在自动交付流水线和打开各个阶段之间的大门变得更加有野心。

& l' K6 Y3 L/ j: Y
, }: b' G% g9 G: a- e2 }$ e
这种信心会带来更快速度的发布,在发布流程中加入自动化会让你变得更有信心。
( q6 H8 i4 L1 A2 [5 s( r7 y* [
  S; O  M6 w& e' W4 Q
如果发布流水线实现的非常好,你应该不用花费额外代价就能得到这种回滚能力。如果版本9发生了故障,部署版本8就好了,它应该同样可用,所有签署和准备重新部署在您的流水线末端。

3 h* _! b5 Y' b: o4 N* Y1 {

7 m' X2 O9 D/ X
目标:

/ D- d: a# z, B* R: y

- }# _& }/ X2 a+ ]
为快速重复的回滚任何软件提供一种机制

, G2 L# @, O3 }7 }

; Z$ ]2 w5 b/ m5 _4 F! [
将其构建在流水线流程中,以减少开发者显示的为回滚编码

2 H" t" }- q7 s! G6 R: |6 O# j
9 ]4 \( [! B6 S" B3 b" V$ \7 L- e+ u
定义的去测试你的回滚机制,作为测试流水线的一部分,以保持你对流程的信心

1 E2 h. |- n4 @: {0 v+ A( K6 y

3 `" O7 q" C1 P  b7 V' M2 ~9 e
提取特异于环境的配置
. @8 Q9 ~5 D( E- a/ S9 K1 x+ o- I
' t& t; K# t" j" c7 k& `+ z8 m
在流水线中正确并且一致的去使用二进制包和产品是很重要的。如果 QA 和 UAT 在开展工作的过程中不同的二进制包,那么你的测试完全是无效的。
/ K- q5 h2 W$ t  ~# k5 E" e" S

( B& o( S0 [6 Q- ^4 k
基于这个理由,你需要获得将同样的应用二进制包推进任意环境的能力,接着分开发布环境特异的配置。这种配置应该像其他任何代码一样进行版本控制,这使得你获得更多的复用和更好的审计。

4 E$ z: ]1 ^0 s2 b0 p
# F8 B* e* H2 Y0 n
确实,这样做最大的阻碍是拥有环境特异的配置会和实际的二进制包紧密的耦合在一起。
5 i* {. }. H. I  ~5 r% [" u

9 b8 z4 i0 ]! p2 ~1 r
将这些环境特异的配置提取出来,放到额外的属性文件或者其它配置源会使你获得对待此类阻碍更大的敏捷性。
% X3 l8 u7 q/ m) j8 B7 p
* `; h- ]6 m2 R* b$ b
目标:

7 b$ D9 W5 ?+ i2 @. q6 ?6 {

' \; X' _/ g% W* z' Y0 E2 s
在你的交付流水线中使用同样的二进制包,避免重新构建源或者以任何方式处理二进制文件,即便你觉得这样做是安全的

# ^2 S* E6 m8 f- P! E7 T+ j

1 r8 }: G- e' L. h
将环境特异的信息提取到版本控制的配置,这会使其从主要的发布产品中分开
9 s3 O( K% A* ?" N/ s( w- m
) @" k) J: M* ?8 C: |
执行金丝雀发布

1 F- T3 L, K- ?0 H" q8 ]
2 j( d, g1 A. I- U* V
一个增加产品环境稳定性的有用的技术是金丝雀发布。这个概念涉及到将你的软件的下个版本发布到生产中,但是只将其暴露给你的用户的一小部分。这可以实现,例如,使用一个负载均衡器仅仅将一小部分比例的信号量定向到新的版本。

9 Z& V: {7 x4 q- F5 p4 l2 C

. w$ V) B5 s9 G9 P
尽管我们的目的从来都不是将任何 bug 引入到生产环境中,很明显,你更愿意将大部分用户与任何问题隔离起来。
& [  l9 X2 Z1 D

! q9 L+ D; Z1 I# P: g/ W! ~
当你在发布过程中建立了信心,随后你可以增加新版本对用户的暴露的数量,知道完全取代旧版本。
! \# q0 X# ~" |4 w/ H
. z2 s( O/ x0 ^4 l- B7 b
金丝雀发布在持续交付的一个重大的胜利,但它需要更多额外的工作和应用架构上的变化。
+ c4 q7 E# F# `( O2 A

$ V0 M# O% M$ i; |& F. m8 ?( c  |5 r
目标:

3 k" I5 I$ ^& a# N# S  N
4 _0 b( \, {8 p" Z
进行金丝雀发布,同时不影响生产版本被用户正常使用
7 V8 x1 q& T1 _5 z5 _) v
捕捉构建审计信息
% {0 r: w* m" B. A  m) C5 F3 N
$ v! g0 w$ Y! [# @& d
理想情况下,你的持续发布流水线应该会给你带来一个清晰的途径,关于每个发布候选者的变更。手动测试可以特定的去关注改变过的区域,在你知道每个发布的实际范围后你会更有自信的前进。

! m: I; ~0 T4 C, k

+ y) j* B9 g2 G. o* _* p* n4 V
通过在持续集成服务器上集成问题追踪软件诸如 Jira 和 Pivotal Tracker,你可以开发高度自动化的系统发,发布说明可以被构建和链接回到个别问题或缺陷。

; b# O0 L0 a; u4 W( |$ P" F4 Z

( K1 \% i$ N# }" y7 C$ S( C
你应该确保为了可追踪性和可调查性去捕捉被发布到某个环境的所有二进制文件,仓库管理工具诸如 Nexus 和 Artifactory 在此非常有用。也有很大一批工具,作为容器镜像作为专门的登记。
# i  f8 }  Y8 E. J1 x! [! o# X

4 B1 s/ A* H, F9 Y! V
/ W$ R3 P: ~9 |2 K& _# `
目标:

! Z5 L% p5 C) _. C% i
8 g' c4 B2 c; H
集成问题追踪软件或者变更管理软件将会为每个发布候选着定位到详细的问题审计信息
, {9 ?; F0 i8 {+ ^6 h3 P
9 V/ L9 a$ j: E; c
变更控制所有相关的代码以及归档所有发布过的二进制文件

* E" R. I9 r3 f; `7 q, }( v& d
- R, s9 I. S! A4 w2 I
实现功能开关
  ]8 J, y2 n/ n. w. @5 @* P4 y
' l$ {4 X! L3 L/ A# {
功能开关是一个开发者构建进软件的设施,以获得在一个较高水准的粒度上切换不同特性的能力。这项简单的技术可以通过加大控制如何使新的特性投入生产使用以增加系统的可靠性。
! k  S6 A/ }) [) Q

' U3 F$ D& ]9 O
一个优秀的功能开关将会:
; m/ h3 t) v3 c; q

* _+ E, b0 C: {8 U' t1 z
  • 在运行时被管理而不需要重启或者中断用户

    2 K; V. [- B% K
- L$ u% I' y" H  S% @: {5 h
  • 良好测试,这意味着你应该确保你的测试覆盖了所有你将要计划在生产使用的新特性的组合
    ' E' u" a1 g, m5 W! X

  Y  E4 S* t/ Q  O
  • 运行时识别,允许你识别哪个特性在什么场景下被激活,以及他们与系统用量之间的关系

    4 m$ A3 x5 m4 s0 M. Y

/ S! A% A2 A( a; S" v' U
简单的特性标志可能看上去会简单的构建自己。你可能会喜欢快速发现,然而,你的功能开关实现所需的功能数量迅速扩展:历史比较,审计跟踪和基于角色的访问控制的名称,但是不多。

/ F; }; w5 |+ o+ B: y$ x, ]6 b7 k! }

& V) P( H+ P0 ^  F. Z3 W: V/ N
目标:

- `: ]- _8 w8 e+ n
4 i2 W0 i. E: |
实施功能开关,充分了解对质量检查和生产操作的影响
( N, X3 V$ {  J7 t/ M5 `

1 ]/ d5 M2 k: Z7 c$ n9 h0 i. a

% k+ z% K. m; X7 E7 F" V3 ]) @
使用基于云和管理的基础设施

/ G2 `, N6 }3 ?/ J9 T* T7 r
' [/ {" s- t4 k3 w; G, c& M4 p* p

, @& _0 v  D) W& \
在这篇文章的多个地方,很多云和基础管理提供商被提及。这是因为他们代表了一种快速和成本效益的方式,加快您的持续交付成功。
$ i% u5 a4 y( ^: ~$ y; M2 Q) w  A
9 i6 L1 `8 d0 z1 a( Y. N& N
云和管理基础设施即服务在支持在构建和发布基础设施时有诸多需求的团队时显得格外有用。比如你可能会发现在你进行发布时,你需要暂时提升你的容量。

7 @, i+ u. R. z7 G& ]( V) R

7 J  V2 [$ d/ D* y8 ?( h
云和自动化基础设施管理的结合是处理 CI 中的变化理想选择。基于这个理由,云托管业务诸如DaoCloud Services,DEV@cloud、Travis CI、CircleCi 是外包您的持续交付基础设施的理想候选人。
- N4 i" p, R$ g# T
; t7 a, M) T, v% S7 g

# {) ^8 I2 N# m1 N' T
目标:
, Z/ U2 T- {+ P  s
$ C: @/ W5 y' _/ b2 W, k6 {2 g
减少基础设施管理投入,并通过部署到云或基础设施服务使其支持变化的需求
: h8 T' w5 U+ A* l+ r* e
6 `/ h3 s0 P" ]) H

6 a4 a7 Z) J  q8 w* ~& [5 @( M
06
检查列表

: C1 L' P3 Q4 P
基础原理 - 发布自动化:

3 q3 i2 W( A/ G2 O
/ h% y+ }/ ~6 B/ E: k
自动化构建和打包

0 Z/ z: b- M! r) s3 x

. M8 y( G+ t+ ^9 w+ E
自动化持续集成

% s3 G7 y3 P% \5 Y4 h. }

" [% M5 ?% p. d( ]
自动化测试

- O8 P5 i  `' @, |" T$ O

& V2 |9 q5 U9 y, L: ~6 i
自动化部署

1 b% r) s3 {! a6 q& ~) n% L. R/ }

. P3 r0 b6 B7 d/ u; e: A
受管理的基础架构和云
- e% M8 u; n) T* X) Z
$ g$ D6 O% m' G: R% {
基础架构即代码
# N$ M0 V6 a( ]" f1 b

/ \+ k5 x# g- s: E# j
容器框架
+ q1 u3 t4 O# {" @" f- |

4 @/ Y9 n# ~. \9 I. l* R
自动化生产部署
6 x) G* |; j2 ^* @  C8 v2 r
实现一个持续交付流水线
4 x5 t8 Q  C6 W  k9 D4 i" v& ~
流水线建模
% J2 }( \& T- A6 W) i9 @

) u- |1 s% L$ i0 f) s
识别非自动化的活动和网关

# u# J0 L7 Y" C/ |' x

  T6 e) L- H: H
实现流水线

0 y$ V) m+ M: ?+ _

: a0 x! ?! v/ {$ n; B/ H
最佳实践
* ]7 u/ A2 l+ k4 R5 J, J$ j
实现监测
7 k) G* ?9 N; P  X9 J' |
7 ^$ r3 q+ e% r, I
实现回滚

$ x, Q9 E  p( n' T

" t7 n" E$ y5 R6 g6 i+ f2 m' S2 O
提取特定于环境的配置(配置与代码分离)
, b0 J8 q5 T& H. B* c
6 ~1 w. p! W, ^
执行金丝雀发布
. ]1 ]. n7 F2 L1 q" Y9 R- z" i
; I; Q: y1 C% b
记录审计信息

8 c& v2 s5 G/ f  Y

- }4 |9 J; U6 E, p8 y
实现功能开关
! u4 W$ O  ]( e+ M" F8 g

9 w; z9 K7 v6 x$ q$ q4 C
使用基于云的基础架构
: k; {- s" H' }3 y) H. N7 ~

9 v7 Y3 F# J/ {4 w7 ^% r2 i原创: 云原生转型实验室
) I1 n& p- y& K! ?: ~
# F) [% \6 \8 R# R7 S: N5 o

本版积分规则

选择云运维时代的王牌讲师-长河老师,助你轻松入门ITIL Foundation培训课程

QQ|小黑屋|手机版|Archiver|艾拓先锋网 ( 粤ICP备11099876号-1|网站地图

Baidu

GMT+8, 2019-3-24 07:18 , Processed in 0.211770 second(s), 26 queries .

Powered by Discuz! X3.2

© 2001-2013 Comsenz Inc.

快速回复 返回顶部 返回列表