前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >Jenkins + Docker 助力 Serverless 应用构建与部署

Jenkins + Docker 助力 Serverless 应用构建与部署

原创
作者头像
donghui
修改于 2021-01-07 02:09:34
修改于 2021-01-07 02:09:34
2.1K00
代码可运行
举报
文章被收录于专栏:donghui的博客donghui的博客
运行总次数:0
代码可运行

本文来源: ServerlessLife 公众号

近日,使用 Serverless 开发了一个应用。其中 CI/CD,是需要考虑的一个问题。这里用到了 Jenkins 和 Docker。并且 Jenkins Pipeline 运行在容器中。

本文将介绍如何使用 Jenkins 和 Docker 构建并部署 Serverless 应用。

环境安装

需要安装的软件

  • Docker
  • Jenkins

笔者用的 MacBook,已经事先安装好了 Docker,并且由于从 DockerHub 下载镜像比较慢,为了加快镜像下载速度,设置了使用国内的 Docker 镜像源。

Jenkins 有多种运行方式:

  • jenkins.war  + Tomcat
  • java -jar jenkins.war
  • 各种 linux 操作系统分发包(例如:rpm 包)
  • Docker
  • Kubernetes
  • 云厂商提供的解决方案
  • ……

笔者这里使用 Docker 运行 Jenkins,因为构建步骤也会运行在 Docker 中,需要将 docker.sock 和 docker 命令挂载到容器中,启动 jenkins 命令如下:

docker run -d -p 8080:8080 --name jenkins -e TZ="Asia/Shanghai" -v jenkins_home:/var/jenkins_home -v /var/run/docker.sock:/var/run/docker.sock  -v (which docker):(whichdocker):(which docker)  jenkins/jenkins:lts

注意:由于容器内 Jenkins 服务是由 jenkins 用户启动的,它无法访问 /var/run/docker.sock,因此我们需要更改这个文件的权限。

在 Jenkins 启动后安装需要用到的插件:

  • Localization: Chinese (Simplified) 
  • Git
  • Pipeline
  • Docker Pipeline
  • Mask Passwords

建议启动后只先安装 Localization: Chinese (Simplified)  插件(该插件由 Jenkins 中文社区维护)。

等安装好 Localization: Chinese (Simplified)  插件,并设置好管理员账号后,再安装其他所需的插件。

为什么要这样做呢?

由于 Jenkins 插件服务器在国外,通常情况下因为网络问题,下载插件会比较慢,也经常会遇到插件下载失败的问题。

为了解决这个痛点,Localization: Chinese (Simplified)  插件提供了使用国内 Jenkins 插件源的功能。

因此,在安装好 Localization: Chinese (Simplified)  插件后,请立即设置使用国内的 Jenkins 插件源,这样之后其他插件的下载将变得快如闪电。

定制构建环境的 docker 镜像

本文使用 Serverless Framework 部署应用到腾讯云。

serverless 命令行是使用 nodejs 开发的,所以会需要 nodejs 环境。

此外,计划部署的应用是用 python 开发的,也会需要到 python 环境。

应用构建部署是在 docker 容器中运行的,所以需要一个同时安装有 nodejs 和 python 的 docker 镜像。

GitHub 上找到了 docker-python-nodejs 仓库: https://github.com/nikolaik/docker-python-nodejs

基于  nikolaik/python-nodejs 镜像构建了新镜像  python-nodejs-serverless,Dockerfile 如下:

FROM nikolaik/python-nodejs:python3.6-nodejs12

RUN npm config set registry http://registry.npm.taobao.org&&npm install -g serverless

使用 docker build 命令构建镜像:

docker build -t python-nodejs-serverless .

创建 Jenkins Job 构建部署应用

创建一个 Pipeline 类型的 job,名称为:serverless-python-demo-pipeline,并开启参数化构建,增加两个密码参数:TENCENT_SECRET_ID 和 TENCENT_SECRET_KEY,用于自动登陆腾讯云。

经过不断实践、不断完善,Jenkinsfile 最终内容如下:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
pipeline {
    agent {
        docker {
            image 'python-nodejs-serverless'
            args '-e TZ="Asia/Shanghai"'
        }
    }
    stages {
        stage('Checkout') {
            steps {
                git branch: 'main', url: 'https://github.com/donhui/serverless-python-demo.git'
            }
        }
        stage('EnvSetUp') {
            steps{
                wrap([$class: 'MaskPasswordsBuildWrapper']) {
                    sh 'touch .env'
                    sh 'echo TENCENT_SECRET_ID=${TENCENT_SECRET_ID} >> .env'
                    sh 'echo TENCENT_SECRET_KEY=${TENCENT_SECRET_KEY} >> .env'
                }
            }
        }
        stage('Build') {
            steps {
                sh 'pip install -i https://pypi.douban.com/simple/ -r requirments.txt -t ./'
            }
        }
        stage('Deploy') {
            steps {
                sh 'serverless deploy'
            }
        }
    }
    post{
        always {
                deleteDir()
        }
    }
}

对于 Jenkinsfile 做如下说明:

  • pipeline 由 agent 、stages 和 post 组成,其中 stages 下包括一系列 stage,而 stage 下又有 steps,steps 下则是一些指令
  • agent 为 docker 表示构建过程运行在 docker 容器中
    • docker args 中 -u 0:0 表示以 root 用户运行 docker 容器,否则会出现一些权限问题
    • docker args 中 TZ="Asia/Shanghai” 表示设置时区中国区,这样 serverless 命令行将会将应用部署到腾讯云,否则默认部署到 AWS
  • stages 下包括多个 stage:Checkout、EnvSetUp、Build、Deploy
    • Checkout 阶段用于检出代码,如果是私有仓库,还需要用到 Credentials 插件
    • EnvSetUp 阶段用于生成 .env 文件,用于自动登录腾讯云,为了避免密码明文显示在控制台,这里用了 Mask Passwords 插件
    • Build 阶段主要是用于构建,这里使用 pip 命令安装第三方库,其中用到了豆瓣的 python 源
    • Deploy 阶段则是使用 serverless deploy 命令部署应用
  • post 用于 pipeline 或 stage 完成后执行后置操作,这里用来在 pipeline 完成后对工作区进行清理

点击 Build With Parameters—>开始构建,运行 Job:

运行状态截图如下,从下图中可以看到每次构建各个 stage 的耗时:

查看 EnvSetUp stage 的日志,可以看到敏感信息已经被隐藏,保证了信息安全,这要归功于 Mask Passwords 插件:

关于 Mask Passwords 插件的设置,在系统管理—>系统配置中,可以对 Mask Passwords 插件做一些全局设置,如下图所示:

查看 Deploy 日志,可以看到部署成功的信息提示:

打开应用控制台,serverless-python-demo 应用详细信息如下:

总结

本文介绍了如何使用安装 Jenkins 及插件,如何定制构建环境的 Docker 镜像,并展开分析了 Jenkins Pipeline 的核心配置文件:Jenkinsfile。此外,还用到了 Mask Passwords 插件来隐藏敏感信息,保证了信息安全。

本次实践使用 Jenkins + Docker 成功部署了 Serverless 应用,希望对看到这篇文章的读者带来一定的借鉴参考意义。

参考

https://hackernoon.com/jenkins-docker-and-cicd-for-serverless-bw5p323d

https://github.com/nikolaik/docker-python-nodejs

https://hub.docker.com/r/jenkins/jenkins

https://github.com/jenkinsci/localization-zh-cn-plugin

https://stackoverflow.com/questions/46659862/how-to-mask-a-password-field-in-jenkins-pipeline-project

https://www.jenkins.io/doc/book/pipeline/syntax/

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
使用 CODING DevOps 部署 Serverless 应用
2021年年初,使用 Serverless Framework  在腾讯云上部署了一个个人博客:serverlesslife.cn。
donghui
2021/03/07
3.2K0
使用 CODING DevOps 部署 Serverless 应用
如何做 Serverless 自动化部署
前言 随着敏捷和 DevOps 的流行,CI/CD 已经成了所有开发者在开发过程中必不可少的最佳实践,主要目标是以更快的速度、更短的周期向用户交付行之有效的软件。 它能给我们带来如下好处: 缩短发布周期 降低风险 提高代码质量 更高效的反馈循环 可视化过程 因此在 Serverless 越来越流行的今天,如何让 Serverless 的项目也能快速的搭建 CI/CD,是这篇文章的重点。 习惯了 CI/CD 的用户都期望有一个快速搭建自动化部署的教程,这篇文章会以下面几个流行的平台来讲解如何搭建自动化部署
腾讯云serverless团队
2022/03/04
1K0
Jenkins 构建自动化 .NET Core 发布镜像
在本章中,将介绍如何在 Linux 下使用 Docker 部署、启动 Jenkins,编写脚本,自动化构建 .NET Core 应用,最终将 .NET Core 应用打包为 Docker 镜像。
痴者工良
2021/06/29
2.6K0
Jenkins 企业级 CI/CD 实践:安装、配置与 Kubernetes & Docker 集成
Jenkins 是最流行的开源 CI/CD 工具之一,广泛用于自动化软件构建、测试和部署。然而,由于其配置复杂、插件众多,许多企业在落地 Jenkins 时面临挑战。本指南将详细讲解 Jenkins 的安装、Pipeline 配置、Agent 管理、插件扩展,并演示如何与 Kubernetes、Docker 集成,构建高效的自动化部署流程。
网罗开发
2025/02/07
3840
Jenkins 企业级 CI/CD 实践:安装、配置与 Kubernetes & Docker 集成
『Jenkins』Jenkins与Docker集成:构建、测试与部署自动化流程
在现代软件开发中,持续集成(CI)和持续交付(CD)已成为提高开发效率、软件质量和部署速度的核心实践。Jenkins作为全球最流行的开源自动化工具,广泛应用于CI/CD流程的实现。Docker则提供了一种轻量级的容器化解决方案,能够在各个环境中一致地运行应用程序。将Jenkins与Docker结合使用,能够极大地提升开发和运维的效率,特别是在构建、测试和部署流程中。
数字扫地僧
2025/02/06
7540
使用 Jenkins Blue Ocean 构建 Android 项目
Blue Ocean 是 Jenkins 推出的一套新的 UI,对比经典 UI 更具有现代化气息。2017 年 4 月 James Dumay 在博客上正式推出了 Blue Ocean 1.0。
DevOps时代
2019/09/03
2K0
本地部署Jenkins环境
Jenkins是一款使用比较广泛的CI/CD平台,2.0版本开始支持了pipeline,通过jenkinsfile文件进行流水线的控制。本文提供了一种在本地Linux环境中快速搭建Jenkins测试环境的方法。
drunkdream
2020/01/02
1.2K0
使用 Jenkins 构建 CI/CD 之多分支流水线指北
由于公司的 Jenkins 配置没有部署成功的通知,在我学了几天的 Jenkins 后终于是对公司的 Jenkins 配置下手了,结果我刚装完 dingtalk 插件自动重启后,发现之前主管配置的构建项目数据都丢失了,正好给了我练手的机会,于是就有了以下从0到1的辛酸历程。
DevOps时代
2021/04/20
2.3K0
使用 Jenkins 构建 CI/CD 之多分支流水线指北
云函数场景下的DevOps实践--CODING企业版
云函数scf init 命令可以进行项目初始化操作。基于Git仓库模板项目可以快速创建出一个简单的模板项目,进行进一步的开发。
腾讯云serverless团队
2019/07/19
1.7K0
云函数场景下的DevOps实践--CODING企业版
jenkins快速入门
jenkins是一个非常老牌的ci/cd工具,它是一款使用Java写的开源自动化应用。可以通过界面或Jenkinsfile告诉它执行什么任务,何时执行,理论上,可以让它执行任何事,一般用来做ci/cd(开发只用关心代码实现,提交代码以后自动测试、打包、自动发布)可以说体量稍微大一点的团队都有自己的持续集成工具。
机智的程序员小熊
2020/06/28
8930
jenkins快速入门
Docker 安装 Jenkins 并实现项目自动化部署
Jenkins 是一款开源的持续集成(DI)工具,广泛用于项目开发,能提供自动构建,测试,部署等功能。作为领先的开源自动化服务器,Jenkins 提供了数百个插件来支持构建、部署和自动化任何项目。
码老思
2023/10/19
3.2K0
Docker 安装 Jenkins 并实现项目自动化部署
DevOps整合Jenkins+k8s+CICD
基于现在的互联网现状,更推崇敏捷式开发,这样就导致项目的迭代速度更快,但是由于开发团队与运维团队的沟通问题,会导致新版本上线的时间成本很高。这又违背的敏捷式开发的最初的目的。 那么如果让开发团队和运维团队整合到成一个团队,协同应对一套软件呢?这就被称为DevOps。 DevOps,字面意思是Development &Operations的缩写,也就是开发&运维。 然字面意思只涉及到了开发团队和运维团队,其实QA测试团队也是参与其中的。 网上可以查看到DevOps的符号类似于一个无穷大的符号
IT运维技术圈
2022/10/24
3K1
kubernetes(十四) 基于kubernetes的jenkins持续集成
-参考:https://github.com/jenkinsci/kubernetes
alexhuiwang
2020/09/23
2.3K0
kubernetes(十四) 基于kubernetes的jenkins持续集成
使用 Jenkins Pipeline 流水线部署 Kubernetes 应用
要实现在 Jenkins 中的构建工作,可以有多种方式,我们这里采用比较常用的 Pipeline 这种方式。Pipeline,简单来说,就是一套运行在 Jenkins 上的工作流框架,将原来独立运行于单个或者多个节点的任务连接起来,实现单个任务难以完成的复杂流程编排和可视化的工作。
我是阳明
2021/06/25
5.3K0
使用 Jenkins Pipeline 流水线部署 Kubernetes 应用
『Jenkins』Jenkins与Git的集成与自动化部署
Jenkins作为一个流行的持续集成/持续交付(CI/CD)工具,能够帮助开发团队自动化构建、测试和部署过程。而Git是目前最广泛使用的分布式版本控制系统。将Jenkins与Git集成,可以实现自动化的代码检出、构建、测试以及部署,使得CI/CD流程更加高效、简洁和稳定。
数字扫地僧
2025/01/21
5010
CICD之Jenkins使用
jenkins把项目拉倒jenkins服务器,放到workspace(一般我们的源代码都在这里),开始进行流水线处理。
全栈程序员站长
2022/09/02
5440
基于Kubernetes构建Jenkins微服务发布平台
软件环境:Jenkins + Kubernetes + Gitlab + Harbor+helm
yuezhimi
2020/09/30
2.1K0
基于Kubernetes构建Jenkins微服务发布平台
React/Vue 等前端应用通过jenkins 自动打包升级全流程演示(一万多字有点长)
安装系统:linux Docker版本:Docker version 19.03.5, build 633a0ea
星宇大前端
2022/05/06
2.6K0
React/Vue 等前端应用通过jenkins 自动打包升级全流程演示(一万多字有点长)
Jenkins安装
Jenkins是一个自包含的开源自动化服务器,可用于自动化与构建,测试以及交付或部署软件有关的各种任务。 Jenkins可以通过本机系统软件包Docker安装,甚至可以由安装了Java Runtime Environment(JRE)的任何计算机独立运行。
mikelLam
2022/10/31
4940
从0搭建属于自己的Jenkins持续集成平台
Jenkins在日常工作中占据了一个非常重要的角色,帮助我们节省了大量用于构建的时间。有些公司有运维大哥对Jenkins进行维护,如果没有那只能自己动手了。俗话说的好自己动手丰衣足食,所以本文就从0开始搭建属于自己的Jenkins持续平台。主要包含,普通项目构建、流水线构建、多分支流水线构建并将构建结果辅以钉钉通知。
不一样的科技宅
2020/07/08
1.1K1
相关推荐
使用 CODING DevOps 部署 Serverless 应用
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
本文部分代码块支持一键运行,欢迎体验
本文部分代码块支持一键运行,欢迎体验