- 综合排序
- 最热优先
- 最新优先
- 来自专栏有点技术
tekton入门-pipline
pipline总览 PipelineRun允许您实例化并执行集群上的。A 以所需的执行顺序Pipeline指定一个或多个Tasks。 指定 Resources pipline需要piplineresources为tasks提供输入存储输出,您可以在Pipeline定义的spec部分的resources字段中声明它们。 name: my-repo type: git - name: my-image type: image 指定 Workspaces Workspaces允许指定一个或多个pipline first workspaces: - name: src workspace: pipeline-ws1 指定Parameters 您可以指定要在执行时提供给pipline
1.7K11发布于 2020-07-13 - 来自专栏呼延
Redis的pipline测试
前言 Redis的性能是很好的,但是仍然有其性能上限.Redis提供了Pipline功能,可以在某些场景下极大的提升qps. 为什么需要pipline 先介绍两个概念:Request/Response protocols 和 RTT. Redis是一个使用TCP进行通讯的C/S架构,也被叫做请求/响应协议. 可以发现在这个过程中有两个信息的发送事件,这个事件叫做RTT(Round Trip Time).pipline主要节省的就是rtt时间. 使用pipline的性能测试 我们使用的客户端为Jedis,分别进行10000,100000次操作,邮箱变量有本地redis以及远程redis(因为远程通信的网络延迟一般也是避免不了的).测试结果如下: times 不使用pipline 使用pipline 本地10000 406ms 38ms 本地100000 3557ms 131ms 远程10000 43641ms 76ms 远程100000 388632ms
75020发布于 2019-06-26 - 来自专栏DevOps时代的专栏
利用 Jenkins Pipline 来编排 DevOps 工具链
前言 我今天跟大家分享的话题是：利用 Jenkins Pipline 来编排 DevOps 工具链，把我们的产品部署到任何地方。 主要内容分成三块： 第一个我会简单介绍一下我们公司的敏捷和 DevOps 转型； 第二个简单介绍一下 DevOps 工具链； 第三个重点是以 Jenkins Pipline 为核心，怎样实施一个以微服务架构为基础的 主要是用 Jenkins Pipline 的方式。这里有很多共性的步骤可以复用的，图的上半部分是我们在实验室内部模拟了一次产品升级。 下半部分是一次在 AWS 上面的安装部署。
2.4K81发布于 2018-04-17 - 来自专栏Linux运维技术之路
ES服务-聚合查询之Pipline聚合详解
责任链模式: 通过责任链模式, 你可以为某个请求创建一个对象链. 每个对象依序检查此请求并对其进行处理或者将它传给链中的下一个对象。
79310编辑于 2024-03-07 - 来自专栏devops_k8s
Jenkins分布式构建和Pipline
Pipline简介 pipline 是帮助 Jenkins 实现 CI 到 CD 转变的重要角色，是运行在 jenkins 2.X 版本的核心插件，简单来 说 Pipline 就是一套运行于 Jenkins Pipline优势 可持续性：jenkins 的重启或者中断后不影响已经执行的 Pipline Job 支持暂停：pipline 可以选择停止并等待人工输入或批准后再继续执行。 Job测试 创建Pipline Job: ? 测试Pipline Job ? 生成拉取代码的Pipline脚本 ? ? 更改Pipline脚本 66 ? 执行验证Pipline Job ? 服务器验证数据 ? Jenkins分布式构建 ? ? ? 添加slave认证凭据 ?
1.1K50发布于 2020-09-27 - 来自专栏小仙女技术栈
Jenkins--pipline 流水线部署Java后端项目
} } } } 5.新建流水线项目 Jenkins--pipline 流水线部署Java后端项目 Jenkins--pipline 流水线部署Java后端项目 Jenkins--pipline 流水线部署 Java后端项目 6.构建测试 出现问题1： java 命令不识别 Jenkins--pipline 流水线部署Java后端项目 解决方案 1.重新设置环境变量 Jenkins--pipline 流水线部署 Java后端项目 2.建立软连接 ln -s /usr/local/java/bin/java /usr/bin/java 3.构建测试 Jenkins--pipline 流水线部署Java后端项目 4 流水线部署Java后端项目 2.重启Jenkins（一定要重启） systemctl restart jenkins 3.再次构建测试： Jenkins--pipline 流水线部署Java后端项目 结果：成功解决问题 7.项目测试 Jenkins--pipline 流水线部署Java后端项目 Jenkins--pipline 流水线部署Java后端项目 后续优化： 1.由于我是使用实验环境部署的，
1.8K52发布于 2020-09-23 - 来自专栏从零开始学自动化测试
Jenkins学习19 - pipline 构建项目生成 allure报告并发送邮箱
报告 插件管理搜索：allure， 安装 allure 插件 系统管理-全局工具管理，安装allure命令行工具 新建流水线任务 新建流水线任务 配置Pipeline script 完整的pipline
70410编辑于 2023-12-18 - 来自专栏山行AI
Request-Response通讯模式的优化(share connection、pipline、asynchrous)
将多个Request打包在一起，同时发送给服务器，服务器处理完后，按照Request顺序返回Response，这就是pipline。 http pipeline,redis pipeline,mysql 的batch update也算是pipline。 Netty支持HTTP pipline 怎样在Server端实现HTTP pipeline，在Server端要做的是根据: https://github.com/typesafehub/netty-http-pipelining Redis pipline https://redis.io/topics/pipelining 6. pipelining在实践中会出现许多问题： 一些代理服务器不能正确的处理 HTTP Pipelining
1.4K30发布于 2019-06-28 - 来自专栏GiantPandaCV
【MMDetection 超全专栏】二，配置类和注册器&数据处理&训练pipline
配置方式支持python/json/yaml,从mmcv的Config解析,其功能同maskrcnn-benchmark的yacs类似,将字典的取值方式属性化.这里贴部分代码，以供学习。
2.7K30发布于 2020-06-04 - 来自专栏宇宙之_一粟
为什么需要线程池？
= connection.pipline() try: if connection.exists("kill_flag") == 1: pipline.watch ("kill_num", "kill_user") total = pipline.get("kill_total") num = int(pipline.get pipline.incr("kill_num") user_id = s.pop() pipline.rpush("kill_user", user_id) pipline.execute() except Exception as e: print (e) finally: if "pipline" in dir(): pipline.reset() del connection
46531发布于 2020-10-26 - 来自专栏宇宙之_一粟
Python操作Redis
(管道)的方式向Redis服务器传递批处理处理命令和执行事务 pipline = con.pipline() # 创建pipline对象 pipline.watch( ) # 监视记录 pipline.multi() # 开启事务 pipline.excute() # pipline来增删改查，对事务进行提交 pipline.reset() # 一定要关闭 =pool ) try: pipline = con.pipline() pipline.watch("9527") pipline.multi() pipline.hset ("9527", "name", "Jackylove") pipline.hset("9527", "age", 23) pipline.execute except Exceptyion as e: print(e) finally: if "pipline" in dir(): pipline.reset() del con
53621发布于 2020-10-26 - 来自专栏大飞的部落阁
jenkinsclient简单易用的jenkins SDK
WorkflowJob http://x.x.x.22:8888/job/Auto_Test_Pipline/ xxx-FT-Pipline FreeStyleProject http://x.x.x.22:8888/job/xxz-FT-Pipline/ [root@localhost ~]# # 2、查看项目详情 [root@localhost ~]# jenkins job info Auto_Test_Pipline actions: [{}, {}, {} displayNameOrNull: null fullDisplayName: Auto_Test_Pipline fullName: Auto_Test_Pipline name: Auto_Test_Pipline url: http://x.x.x.22:8888/job/Auto_Test_Pipline
88320编辑于 2022-06-17 - 来自专栏宇宙之_一粟
用Python程序模拟300位观众，为5位嘉宾随机投票，最后按照降序排列结果
= connection.pipline() try: if connection.exists("kill_flag") == 1: pipline.watch ("kill_num", "kill_user") total = pipline.get("kill_total") num = int(pipline.get pipline.incr("kill_num") user_id = s.pop() pipline.rpush("kill_user", user_id) pipline.execute() except Exception as e: print (e) finally: if "pipline" in dir(): pipline.reset() del connection
82131发布于 2020-10-26 - 来自专栏钱塘小甲子的博客
Scrapy之图片爬取。
那么显然，你需要的就是获取图片链接，然后写一个专门下载图片的pipline。很开心的是，scrapy其实已经给你实现好了这个pipline了，是不是很贴心呢！ 好了，我们开始吧。 个人估计的原因可能是一个item的url字段如果传入的是list的话，pipline可以处理多个图片的url，效率会更高。 _url) 我们写完了获取图片url的爬虫之后，就要设置pipline了。 之前我们都是自己写pipline，现在这个pipline是内置的，所以我们不用自己写了，直接去setting文件里面说明要用就可以了 ITEM_PIPELINES = { 'scrapy.pipelines.images.ImagesPipeline 在setting文件里面，首先像申明我们自己的pipline一样进行申明。这个pipline的名称是固定的哦。以后有机会给大家介绍怎么继承这个pipline，然后去实现更多的功能。
1.7K30发布于 2019-01-29 - 来自专栏钱塘小甲子的博客
Scrapy之探讨3个细节
1.多个pipline的处理 在Scrapy的框架中，其实可以有好多pipline。 大家在编写pipline的时候有没有这样的一个疑问，为什么pipline函数最后要有一个语句是 return item 明明item是传入pipline的，怎么又传出去了呢。 大家还记得在使用pipline的时候，在setting文件中要写一个数字么， 比如：XXX.XXX.Mypipline : 300 这里的300就是这个pipline的运行次序。 也就是说，你可以写很多pipline去处理一个item。有点像流水线加工哦。很标准的模块化思想呢！ 所以你可以写一个pipline用来清洗数据，一个pipline用来存储。
37550发布于 2019-01-29 - 来自专栏大飞的部落阁
Jenkins流水线自动拉去代码的实践
SSh Keys 配置： 配置 agent 私钥到 jenkins agent 携带私钥从 Gitlab 上拉取代码，所以需要首先将 agent 上的私钥配置到 jenkins 的全局凭据中以供 pipline agent上公钥的路径：/root/.ssh/id_rsa jenkins 中的全局凭据配置： 设计 Pipline Script pipeline { agent{ label 'pipline jenkins 为用户提供了一个很好的工具，pipline 代码片段生成器，你只需要了解语法的整体结构，具体的操作都可以通过片段生成器进行生成。 下面我就介绍下上面的指定分支拉取代码的 pipline 脚本生成过程。 Q&A 有的同学可能在执行完 pipline 后并没有 Full State View 的展示，此时你需要安装如下几个插件即可。
2K20编辑于 2022-06-17 - 来自专栏搜狗测试
SonarQube WebHook
Jenkins Pipline执行过程，需要实时获取持续集成-静态代码扫描的结果，以确定扫描结果是否符合既定的要求。通过在SonarQube中设定与Jenkins的WebHook，即可解决这个问题。 可以自定义指标，设定质量阈适用的工程 Jenkins Pipline样例 Jenkins Pipline SonarQube Scan样例，在Jenkins Pipline执行过程中，会触发SonarQube 进行代码扫描，同时校验SonarQube返回的扫描结果，来确定Jenkins Pipline的成功与否。
4.9K30发布于 2020-02-21 2.4 亿条深圳共享单车数据集获取完整教程，项目代码已开源【开发者版】
常用脚本一览 scr/data_pipline/fetcher.py：主抓取程序（异步并发）。 scr/data_pipline/db.py：数据库初始化、TimescaleDB 超表设置等。 scr/data_pipline/profiles.py：数据字段与增量列配置。 scr/data_pipline/coords.py：坐标系转换工具（BD09/GCJ → WGS84）。 scr/data_pipline/audit_days.py：按天统计并生成对账表，用于发现缺失并补抓。 启动抓取：uv run python -m scr.data_pipline.fetcher（或在你的虚拟环境中运行）。 用 scr/data_pipline/audit_days.py 生成按天对账表，确认是否需要补抓。
29310编辑于 2026-03-16- 来自专栏Tencent Serverless 官方专栏
云函数场景下的DevOps实践--CODING企业版
当前CODING企业版平台默认支持代码仓库托管、CI/CD自动化pipline。 定义持续集成的pipline 定义持续集成的Jenkins pipline，依赖Serverless本地开发工具提供的本地代码运行、打包以及发布的能力。 使用Serverless本地开发工具需要用户提供腾讯云认证的相关信息，将认证的相关信息通过pipline环境变量的方式提供。 ? Jenkins pipline配置文件 该自定义Jenkins pipline配置文件定义了检出、构建（安装依赖）、测试、部署这些DevOps持续集成流程，最终部署流程将代码压缩包部署到腾讯云函数服务 总结 当前实践利用了CODING平台默认支持代码仓库托管、CI/CD自动化pipline的功能来实现云函数的DevOps流程。
2K40发布于 2019-07-19 - 来自专栏泛互云原生
DevOps 之 Coding CI
接下来，会进入流水线的基本配置页面，这里给流水线取个名称 qcbm-ci-pipline，同时配置代码好仓库和环境变量。 [ci-pipline-default-env.png] 接下来，我们模板生成的基础上配置需要的流水线。 Step 2. 流水线基础配置 点击流水线 qcbm-ci-pipline 图形界面中的 开始，在弹出的“基础配置”对话框中可修改配置，这里我们添加了 QCBM 后台微服务的 docker 镜像名作为环境变量，如下： [ci-pipline-package.png] 在弹出来得对话框中，添加 mavne 打包命令 mvn package 如下图： [ci-pipline-package-cmd.png] Step 5 为流水线 qcbm-ci-pipline 添加触发规则 上一节中创建的流水线 qcbm-ci-pipline，可以手动但不能自动执行。
2.9K20发布于 2021-10-14
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号