穷人也能拥抱‘持续集成’与‘持续交付’

文章首发:https://www.dev-heaven.com
如果有问题请加QQ讨论群:656206901

首先说一说为什么说穷人,笔者自己买了一台阿里云的ECS服务器,最开始是一台便宜的单核1G的服务器(其实前面还有更苦的,一把辛酸泪就不说了),苦了它了,里面跑了一堆服务,诸如Tomcat、Nginx、MySQL、Redis、RabbitMQ、JVM等等,发现本来就很吃力,后来又想搞个持续集成部署个Jenkins,结果搞挂了几次服务器,每次内存飙到95%(要知道Gitlab要求机器最好为4G),只能重启服务器了。又没钱升级配置,只能看看有什么服务比较好。

基本概念

什么是持续交付与持续集成?

持续交付所描述的软件开发,是从原始需求识别到 最终产品部署到生产环境这个过程中,需求以小批量形式在团队的各个角色间顺 畅流动,能够以较短地周期完成需求的小粒度频繁交付。频繁的交付周期带来了 更迅速的对软件的反馈,并且在这个过程中,需求分析、产品的用户体验和交互 设计、开发、测试、运维等角色密切协作,相比于传统的瀑布式软件团队,更少 浪费。

持续集成是一种软件开发实践,即团队开发成员经常集成他们的工作,通过每个成员每天至少集成一次,也就意味着每天可能会发生多次集成。每次集成都通过自动化的构建(包括编译,发布,自动化测试)来验证,从而尽早地发现集成错误。

基本构建

  • 版本控制:可以简单的理解为代码管理(SCM),如常见的GitHub、GitOSC、GitLab等。
  • 持续集成CI:各种CI工具,如Jenkins、gitlab-ci等
  • 自动化测试
  • 构建工具及构建脚本
  • 部署上线

穷人的持续集成

今天的主角就是阿里云的CRP和OSCGit,先说说开源中国的git服务,它是完全免费的,允许开发者使用私有库托管代码,不是GitHub 7刀每月。另一个就是阿里云的CRP,免费的在线编译打包工具,当然CRP目前是公测,公测了好久了,说不定什么时候就收费了,OSCHINA红薯说他们马上会搞个免费的了。

CRP

给你私有、安全的代码托管服务。集合编译、测试、发布等插件。支持所有Git命令,兼容现有Git工具。私有Git仓库,存储任何类型的源代码及文件。在线浏览和管理代码,提升研发效率。

如何使用?
  1. 新建工作流
  2. 选择工作量模板
  3. 配置工作流
  4. 根据提示创建代码仓库

    笔者这里使用的是OSCGit托管代码的,但是CRP只能从阿里code中拉取代码,所以难题就是怎么打通阿里code和OSCGit,让提交到OSCGit的代码怎么同步到阿里code,自建Git服务器可以使用GitHooks,但是OSCGit,以及GitHub只提供了Webhooks,后面我们在来说怎么使用WebHook同步代码。

  5. 小的注意点
    1. crp中‘编译/测试’环节,可以去掉mvn test以节约时间
    2. 物理输出路径必须填写,否则可能无法部署,可以直接填 target/
  6. 部署配置

    在配置部署前需要配置目标机器,配置好才会出现如图所示的配置。
  7. 配置部署组

    添加机器,请选择直接输入机器列表,这样方便点,注意需要支持公网SSH。

  8. 剩下比较简单,就不再赘述了。

如何同步OSCGit代码到阿里code

使用OSCGit提供的WebHooks,如图

提供一个post接口,将接收osc git server 推送的数据

在接口所在机器上创建仓库镜像

  1. clone代码
1
git clone --mirror git@git.oschina.net:demo/demo.git

关于–mirror参数,请查看文章最尾部链接

  1. a
1
2
3
4
5
cd demo.git/
git remote add aliyun git@code.aliyun.com:demo/demo.git # 这里对应你在阿里code上创建的仓库
# 将OSCgit仓库的test和master分支分别推到阿里code,第一次初始化的时候必须这么推,以后只需要执行`git push aliyun `即可。
git push aliyun master
git push aliyun test

使用Nodejs提供webhooks所需接口

这里使用express开发,比较简便,关于express入门请查看我的另一篇博客https://dev-heaven.com/2017/01/06/NodeEE%E5%BF%AB%E9%80%9F%E5%85%A5%E9%97%A8/

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
npm install express-generator -g
express webhook
vim webhook/routes/index.js
var express = require('express');
var exec = require('child_process').exec;
var router = express.Router();
const GIT_PATH = '/usr/local/src/huweirenmai.git/';
/* GET home page. */
router.get('/', function(req, res, next) {
res.render('index', { title: 'Express' });
});
router.post('/webhook', function(req, res, next) {
//var ref = req.body.ref;
//var branch = ref.substring(ref.lastIndexOf("/") + 1);
var commands = [
'cd ' + GIT_PATH,
'git fetch,
'git push aliyun'
].join(' && ');
exec(commands, function(err, out, code) {
if (err instanceof Error) {
res.status(500).end('Server Internal Error.');
throw err;
}
//process.stderr.write(err);
//process.stdout.write(out);
res.status(200).end('OK');
});
});
module.exports = router;

参考

  1. git-mirror http://blog.csdn.net/agul_/article/details/7843678
  2. https://help.aliyun.com/document_detail/30513.html?spm=5176.doc30516.6.543.cigGFK

全文完!

我知道是不会有人点的,但万一有人想不开呢!