前端自动化部署&npm发包初探

一、前言

在实习之前,在学校做个人项目的时候,每每需要将前端构建产物部署到服务器的时候都需要自己手动的经历本地环境打包构建、打开sftp传输工具、代码上传至服务器指定目录(前端静态文件通过Tomcat部署,只需要更新文件即可,不需要重启Tomcat)等一系列繁琐却又简单的工作,也就是说如果我想要在生产环境看到自己在开发环境中产生的变化,那么我就需要经过如上步骤,有时候还要涉及云服务器登陆,登陆又需要去寻找登陆密码(因为密码都是使用的默认的,记不住)。因此,想要立马看到自己的更改,往往是需要几分钟的,而且有时候迭代频繁,这些工作都需要机械重复的去执行,这对于一名程序员来说,这些是有点傻的操作,那么就急需将上述重复的步骤交给程序来操作,因此我产生了发布一款自动化部署工具到npm仓库的想法,供大家(主要用户还是自己)使用。

以下所构思的“前端部署小帮手”npm包已经发布到了npm仓库,以下是github地址,喜欢的话给个star吧,谢谢大家^_^!
前端部署小帮手 - deploy-helper

二、前端自动化部署初探

之前想要实现的是用户登陆目标服务器安装一款npm包(由自己开发)到服务器本地,然后执行一系列指令即可完成服务器生产环境的搭建(包括node环境、java环境、tomcat、数据库等环境),并通过webhook监听远程仓库的变化,自动拉取代码到服务器本地部署。但是实现起来并不简单,而且工作量很大,为了解决当前项目部署繁琐、机械的过程,我仅采取了实现将本地开发环境的构建产物打包、传输、服务端解压缩并清理压缩产物的整个过程。而上述目标则作为更为宏远的目标,逐步完善,渐进式开发。

2.1 deploy-helper

我打算将此包命名为deploy-helper,意为“部署小帮手”。它主要有以下几个核心功能:


deploy-helper.png

配置项 .deploy.config.json

{
  "host": "", // 域名或ip地址
  "port": 22, // 默认sftp连接端口号
  "localPath": "./dist", // 需要上传到服务器的本地文件夹目录
  "remotePath": "/root/dist", // 需要上传到目标服务器的文件夹目录
  "readyTimeout": 20000 // 默认连接超时时间
  "shellScripts": "" // shell脚本
}

构建产物压缩

/**
 * 文件压缩
 *
 * @param {*} localPath
 */
async function compress(localPath) {
  // 压缩产出文件夹名称
  const folderName = path.basename(localPath);
  // 产出文件夹位置
  const outDir = path.resolve(localPath, '../', `${folderName}.zip`);
  const output = fs.createWriteStream(outDir);
  const archive = archiver('zip', {
    zlib: { level: 9 } // 设置压缩级别.
  });

  // 监听压缩完成,文件流关闭事件
  output.on('close', function() {
    console.log(archive.pointer() + ' total bytes');
    console.log('archiver has been finalized and the output file descriptor has closed.');
  });

  // This event is fired when the data source is drained no matter what was the data source.
  // It is not part of this library but rather from the NodeJS Stream API.
  // @see: https://nodejs.org/api/stream.html#stream_event_end
  output.on('end', function() {
    console.log('Data has been drained');
  });

  // good practice to catch warnings (ie stat failures and other non-blocking errors)
  archive.on('warning', function(err) {
    if (err.code === 'ENOENT') {
      // log warning
    } else {
      // throw error
      throw err;
    }
  });

  // good practice to catch this error explicitly
  archive.on('error', function(err) {
    throw err;
  });

  // pipe archive data to the file
  archive.pipe(output);
  // 添加压缩文件(夹)
  await compressDir(archive, localPath);
  // 压缩
  await archive.finalize();
  return outDir;
}


/**
 * 压缩文件、文件夹
 *
 * @param {*} archive
 * @param {*} dir
 */
function compressDir(archive, dir) {
  return new Promise((resolve, reject) => {
    fs.stat(dir, (err,data)=>{
      if (err){
        reject(err);
        return console.log(err);
      }
      const filename = path.basename(dir);
      // 如果是文件夹 则压缩该文件夹
      if (data.isDirectory()) {
        archive.directory(dir, filename);
      } else {
        // 否则压缩该文件
        archive.append(fs.createReadStream(dir), { name: filename });
      }
      resolve(true);
    })
  })
}


连接目标服务器

1. 目标服务器地址可配置

根据配置的.deploy.config.json里面的 host 以及 port,通过ssh2即可实现连接远程服务器。ssh2提供了丰富的api,可以上传、下载、执行shell脚本等。

const conn = new Client();
  conn.on('ready', () => {
    console.log('Client :: ready'); // 服务器连接就绪
    ...
  }).connect({
    readyTimeout: 20000,
    ...config,
    ...args
  });

压缩文件上传

compress(localPath).then((outDir) => {
  const zipFileName = path.basename(outDir);
  let p = config.remotePath;
  p = p.replace(/\/+$/, '');
  const remotePath = p + '/' + zipFileName;
  console.log(outDir, remotePath);
  uploadFile(conn, outDir, remotePath, (res) => {
    console.log('上传成功!', res === undefined ? '' : res);
    console.log('开始解压文件...');
    ...
  }
}

执行自定义shell脚本

1. 文件解压缩

2. 执行npm scripts

3. 执行常见Linux命令

.......

// 执行shell脚本命令
conn.shell((err, stream) => {
  if (err) throw err;
  stream.on('close', () => {
    console.log('Stream :: close');
    conn.end();
  }).on('data', (data) => {
    console.log('OUTPUT: ' + data.slice(0, 100));
  });
  // 进入指定文件夹解压缩文件到当前文件夹 并删除压缩包
  // 执行自定义脚本
  const scripsts = config.shellScripts === undefined ? '' : config.shellScripts;
  stream.end(`cd ${p}\nrm -rf ${folderName}\njar xvf ${zipFileName}&&rm -rf ${zipFileName}\n${scripsts}\nexit\n`);
});

以上就是整个deploy-helper的执行过程的关键流程,它可以满足将静态文件打包上传至目标服务器的指定目录,并可以在此之后回调执行一些用户自定义指令。

但是他目前还有很多缺陷,比如:

对于shell脚本的执行结果没有进行判断,不知道是否执行成功
远程文件夹采用直接覆盖的方式,无法进行版本控制,遇到问题无法快速回滚
...

这些问题,在以后的迭代中,根据实际会逐一解决。

三、npm发包初探

1. 注册npm账号 对于填写的邮箱,一定要去验证,否则发包的时候会报403

npm官网

2. 创建新的文件夹,文件夹命名为你的包名,执行npm init生成package.json文件

3. 如果是第一次发布,执行npm adduser,否则执行npm login

4. 进入项目文件夹,执行npm publish发布

5. 版本控制 执行npm version [updateType]

  • patch 补丁,小改动,版本最后一位数字加一
  • minor 次要修改,次版本号加一
  • major 主要修改,大改,版本首位加一

发包过程截图:


发包过程截图.png

四、总结

经过npm init 到源码构建,再到npm publish,至此,我们已经完成了deploy-helper前端部署小助手工具包的全部工作,它能帮我们压缩上传构建产物到目标服务器指定目录,并进行部署。我们不用再打开sftp工具,或者scp手动传输构建产物了,在一定程度上简化了我们的发布过程。正如我上面所说,小助手仍有很多问题需要进一步解决,正因为任何事情都不是一蹴而就的,蜂巢、蚁巢都是一点一点的筑成的,小助手会在今后的迭代中逐步完善,提供更为简洁和可靠的功能。
同时也欢迎大家给我提出宝贵的改进意见,新人经验欠缺,文中若有不足的地方也望大家包涵!

以下是通过小助手发包的运行过程实例截图:


运行过程截图.png
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,743评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,296评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,285评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,485评论 1 283
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,581评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,821评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,960评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,719评论 0 266
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,186评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,516评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,650评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,329评论 4 330
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,936评论 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,757评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,991评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,370评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,527评论 2 349