1回答
Jenkins并行管道构建
、、、、
并行管道似乎在跨并行分支重用构建。
我一直在玩平行管道来了解它们是如何工作的。假设'FailRarely‘是另一个工作，10%的时间失败，但90%的时间它报告成功。
我的管道脚本如下：
pipeline {
agent {
label "master"
}
stages {
stage ('Run jobs') {
parallel {
stage ('Job 1') {
steps {
浏览 1提问于2021-01-02得票数 1
我使用顶点AI管道来定制培训表格数据。
我运行下面的python代码。创建，使用生成的json运行管道。在培训开始时发生以下错误。
为什么将表格数据集作为图像数据集处理？怎么啦？
环境
kfp==1.6.2kfp-pipeline-spec==0.1.7kfp-server-api==1.6.0 Python 3.7.3
错误消息
ValueError: ImageDataset class can not be used to retrieve dataset resource projects/nnnnnnnnnnnn/locations/us-central1/datasets/3781
浏览 4提问于2021-06-16得票数 0
我在sh 'python -version‘和sh 'python3 -版本中遇到了同样的错误，我不知道为什么当Dockerfile映像安装了python，my版本: 2.319.3我将标签添加到节点时，我不知道为什么Jenkins不识别这个命令.回声和ls命令工作，我不知道我是否理解它非常哈哈哈帮助！
My管线：
pipeline {
agent {
label 'python'
}
stages {
stage ('Test') {
steps {
浏览 14提问于2022-05-20得票数 0
当我声明一个具有两个源(1gcs和1pubsub)的管道时，我得到了一个错误，但仅限于波束DirectRunner。使用Google数据流运行器，它工作得很好。我的管道有"Streaming option = True“ gcsEventsColl = p | "Read from GCS" >> beam.io.ReadFromText("gs://sample_events_for_beam/*.log") \
| 'convert to dict' >> beam.Map
浏览 16提问于2021-06-25得票数 0
我已经在本地机器(MAC OS)和docker上安装了Jenkins。我已经创建了Jenkinsfile，其中包含以下代码
pipeline {
agent {
docker { image 'python:2.7' }
}
stages {
stage('Test') {
steps {
sh 'python --version'
}
}
}
}
现在单击Build Now，就会出现如下错误
+ docker inspect -f . python:2.7
/Use
浏览 79提问于2019-10-20得票数 0
在CentOS 7中，我有一个具有systemd守护进程工作的Python脚本，这个守护进程由我在一个虚拟环境中创建的python版本来执行。我试图调整脚本，使其能够在环境变量中设置虚拟路径，以便通过一个变量更改路径并重新启动服务，轻松切换到不同的虚拟路径。我已经创建了我的systemd脚本，以便能够初始化守护进程的多个实例，这非常有用。当我试图使用一个环境变量来指向我的python解析器时，事情就中断了。这是我到目前为止所拥有的。
/etc/systemd/system/管道-remove@..service：
[Unit]
Description=pipeline remove ticke
浏览 0提问于2018-01-26得票数 2
回答已采纳
我在本地环境中运行Kubeflow Pipeline，还有JupyterLab和Elyra扩展。我已经创建了一个notebook管道，并按如下方式配置了runtime configuration，将api_endpoint设置为http://localhost:31380/pipeline (禁用了安全性)。尝试运行管道时，将显示以下错误消息： Traceback (most recent call last):
File "/usr/local/lib/python3.8/site-packages/tornado/web.py", line 1703, in _exe
浏览 8提问于2020-11-17得票数 2
1回答
Jenkins for
、、、
我不是一个巨大的DevOps专家，但我试图配置一个Jenkins管道来运行我的Python应用程序的Unittest，它依赖于MongoDB。
詹金斯在码头里面跑。
我试过以下几种方法，但它不停地挂着，我不明白这是怎么回事：
pipeline {
agent {
docker {
image 'python:3.9'
args '--user 0:0'
}
}
stages {
stage('build') {
浏览 1提问于2021-04-29得票数 0
回答已采纳
我刚刚安装了python stanford nlp，运行良好：
pip安装标准
在python shell中，我试图实例化这个包，但得到以下错误:-
>>> import stanfordnlp
Traceback (most recent call last):
File "<stdin>", line 1, in <module>
File "/Users/shivajidutta/anaconda/lib/python2.7/site-packages/stanfordnlp/__init__.py", l
浏览 1提问于2019-04-09得票数 2
这是我用来创建数据库容器的docker-compose.yml。
version: '3.7'
services:
application:
build:
context: ./app
dockerfile: dockerfile #dockerfile-prod
depends_on:
- database_mongo
- database_neo4j
- etl_pipeline
environment:
- flask_env=dev #flask_env=prod
浏览 36提问于2020-11-12得票数 1
3回答
我找不到使用pip将本地目录安装为python包的正确方法。
(venv) C:\(...)>pip install . --no-index
Ignoring indexes: http://pypi.python.org/simple/
Unpacking c:\users\fsantos\desktop\biskates.com\biskates\forks\django-pipeline
Running setup.py egg_info for package from file:///(...)%5Cforks%5Cdjango-pipeline
Installing
浏览 1提问于2013-01-04得票数 70
回答已采纳
1回答
当我保存一个管道，它有一个与之关联的ExecutionContext，并尝试再次加载它时，我得到如下所示的错误。 from neuraxle.base import ExecutionContext, Identity
from neuraxle.pipeline import Pipeline
PIPELINE_NAME = 'saved_pipeline_name'
cache_folder = 'cache_folder'
pipeline = Pipeline([
Identity()
]).with_context(ExecutionCo
浏览 23提问于2021-02-12得票数 1
回答已采纳
2回答
当我运行python manage.py收藏品时，我得到：
Traceback (most recent call last):
File "manage.py", line 10, in <module>
execute_from_command_line(sys.argv)
File "/Users/fceruti/Development/Arriendas.cl/venv/lib/python2.7/site-packages/django/core/management/__init__.py", line 443, in e
浏览 3提问于2012-07-05得票数 3
回答已采纳
1回答
我试图作为构建的一部分运行测试子集；但我无法使用python3 -m unittest <test>运行单独的测试。
我试着跟踪文档并阅读：，但我仍然没有运气。
目录结构如下：
new_project
├── new_project
├──── __init__.py
├──── pipeline.py
├── regression_tests
├──── __init__.py
├──── helpers.py
├──── test_pipeline.py
└──── test_connectivity.py
在python3 -m unittest discover级别上运行n
浏览 2提问于2017-08-21得票数 0
试图基于KubernetesPodOperator制作我自己的组件。我能够定义组件并将其添加到组件列表中，但是当尝试运行它时，我得到：
节点'KubernetesPodOperator‘的运算符'KubernetesPodOperator’不在可用运算符列表中配置。请将“KubernetesPodOperator”的完全限定包名添加到KubernetesPodOperator配置中。
和错误：
Traceback (most recent call last):
File "/opt/conda/lib/python3.9/site-packages/t
浏览 10提问于2022-02-14得票数 2
回答已采纳
当我尝试通过将文档写入mongodb时 | "Write User Doc to Mongo" >> beam.io.WriteToMongoDB(uri=MONGO_URI,
db="dbname",
coll="col_name"
浏览 30提问于2019-09-04得票数 0
回答已采纳
1回答
你好，我试着用管道模型加载节省的管道。
selectedDf = reviews\
.select("reviewerID", "asin", "overall")
# Make pipeline to build recommendation
reviewerIndexer = StringIndexer(
inputCol="reviewerID",
outputCol="intReviewer"
)
produc
浏览 1提问于2018-07-10得票数 6
回答已采纳
我正在尝试使用django-pipeline编译一些.less文件。当我运行collectstatic时，所有内容都被正确地复制了，然后我得到了这个错误：
Traceback (most recent call last):
File "manage.py", line 35, in <module>
execute_manager(settings)
File ".../lib/python2.7/site-packages/django/core/management/__init__.py", line 459, in exec
浏览 0提问于2012-05-11得票数 2
回答已采纳
我观察到上一阶段在执行下一阶段时被调用，不确定jenkinsfile在这里出了什么问题 按照以下文档进行操作： https://jenkins.io/doc/book/pipeline/syntax/#declarative-pipeline pipeline {
agent none
options {
gitLabConnection('MY_CONNECTION')
}
stages {
stage('scm_checkout') {
agent {
label 'win_64
浏览 35提问于2019-04-09得票数 0
回答已采纳
如果我单击"Run 'Unittest for ..“在PyCharm中，它打印：
Launching unittests with arguments python -m unittest /home/sfalk/workspace/git/m-search/python/tests/cluster/pipeline/preprocessing.py in /home/sfalk/workspace/git/m-search/python/tests/cluster/pipeline
和报告
没有发现任何测试。
但是，如果我复制了PyCharm声称运行的这一行，即
p
浏览 0提问于2018-05-17得票数 1
回答已采纳
我尝试在spaCy中加载语言模型，但在尝试安装该模型时出现错误，无论是在遗留命令中还是在较新的命令中都是如此。 通过旧版短名称进行安装： python -m spacy download en
Traceback (most recent call last):
File "C:\Users\mikkelson\AppData\Local\Programs\Python\Python39\lib\runpy.py", line 188, in _run_module_as_main
mod_name, mod_spec, code = _get_module_de
浏览 293提问于2021-07-06得票数 0
我正在运行DataFlow配置
test_dataflow= BeamRunPythonPipelineOperator(
task_id="xxxx",
runner="DataflowRunner",
py_file=xxxxx,
pipeline_options = dataflow_options,
py_requirements=['apache-beam[gcp]==2.39.0'],
py_interpreter='python3',
dataflow_co
浏览 5提问于2022-07-08得票数 1
我正在尝试使用python code.My代码中的kafka.ReadFromKafka()方法读取kafka主题中的数据，如下所示：
from apache_beam.io.external import kafka
import apache_beam as beam
options = PipelineOptions()
with beam.Pipeline(options=options) as p:
plants = (
p
| 'read' >> kafka.ReadFromKafka({
浏览 1提问于2020-07-07得票数 0
我试图用Composer检查数据融合管道的状态。在DAG中，我有以下代码，这是一个来自气流的副本
start_pipeline_sensor = CloudDataFusionPipelineStateSensor(
task_id="start_pipeline_sensor",
pipeline_name=PIPELINE_NAME,
pipeline_id=start_pipeline_task.output,
expected_statuses=["COMPLETED"],
failure_statuses=[&#
浏览 1提问于2021-11-02得票数 0
回答已采纳
我们的应用程序从使用Azure python SDK 2.0.0的ADAL身份验证开始。现在我开始将azure.mgmt.servicebus升级到6.0.0，我发现在使用ADAL凭证时出现异常。 creatednamespace = servicebus_client.namespaces.begin_create_or_update(resource_group_name, namespace_name, namespaceparameter).result()
Traceback (most recent call last):
File "<stdin>
浏览 28提问于2020-12-19得票数 0
我使用Eve-SQLAlchemy访问SQLite数据库中的数据。我有一个People类：
class People(BaseModel):
'''Test class'''
__tablename__ = 'people'
id = Column(Integer, primary_key=True)
firstname = Column(String)
lastname = Column(String)
born = Column(Date)
REST很好地处理了这个查询：
cu
浏览 1提问于2019-11-22得票数 0
回答已采纳
我正在将一个python 1.0示例(play- GStreamer .play noraisin.net)从python移植到C，但我不知道如何获取指向管道的指针。在python绑定中，它似乎是抽象的，因此元素和管道可以互换使用。
...
GstElement* element = gst_parse_launch("playbin", &error);
gst_element_set_start_time(element, GST_CLOCK_TIME_NONE);
GstClock* clock = gst_element_get_clock(element
浏览 1提问于2015-02-06得票数 0
我正在尝试使用Python API将文件从笔记本中的Datalab实例上传到我的Google Storage Bucket，但我无法弄清楚。谷歌在其文档中提供的似乎在Datalab中不起作用。我目前正在使用gsutil命令，但是我想了解一下如何使用Python API来完成这项工作。
文件目录(我想上传位于checkpoints文件夹中的python文件)：
!ls -R
.:
checkpoints README.md tpot_model.ipynb
./checkpoints:
pipeline_2020.02.29_00-22-17.py pipeline_2020.02.2
浏览 28提问于2020-03-01得票数 0
回答已采纳
2回答
我正在使用sci-kit学习执行多类分类任务。在我创建的设置中，我想比较不同的分类算法。
我使用管道，其中文本以X的形式插入，Y是类(多类，N= 5)。使用TfidfVectorizer()在管道中提取文本特征。
KNN完成了这项工作，但其他分类器给出了这一点：ValueError: bad input shape (670, 5)
完整回溯：
"/Users/Robbert/pipeline.py", line 62, in <module>
train_pipeline.fit(X_train, Y_train)
File "/Library/Frame
浏览 1提问于2015-04-20得票数 0
1回答
我的应用程序同时使用电子邮件注册和Facebook或Google+注册，使用python auth (0.2.11)。当的一些新用户使用Facebook注册时，他们会被带到错误页面。在此之后，我看到以下错误：
Internal Server Error: /complete/facebook/
Traceback (most recent call last):
File "/app/.heroku/python/lib/python2.7/site-packages/django/core/handlers/base.py", line 132, in get_respo
浏览 6提问于2017-08-29得票数 2
回答已采纳
ImportError在/complete/ twitter /没有名为social.pipeline的模块我在尝试将twitter连接到我的项目时遇到了这个错误这是完整的回溯任何人都知道如何解决这个问题
环境：
Request Method: GET
Request URL: http://127.0.0.1:8000/complete/twitter/? oauth_token=gqaWZAszthiQJEUaZHF72U1y7hGimCLGSGxr6YLUU&oauth_verifier=YAkKy9Q71YrScl1psUXBApx XeQITAcDm
浏览 0提问于2013-05-02得票数 0
我可以在数值管道上运行手动拟合/转换，而不会出现任何错误： fulldf = full_pipeline.fit_transform(train) 该错误仅在运行时出现“ scores = cross_val_score(full_pipeline_lr, X_train, y_train,cv = 2) 完全repex import numpy as np
import pandas as pd
from sklearn.preprocessing import StandardScaler,PowerTransformer
from sklearn.pipeline import Pip
浏览 52提问于2020-09-20得票数 1
有人能帮我解决这个问题吗？我在试着安装测斜度计。我已经装好肉饼了。当我试图重新启动Ceil示波器-代理通知服务时，将显示以下消息：
tail -f /var/log/ceilometer/ceilometer-agent-notification.log
2020-09-13 21:34:12.369 11761 WARNING stevedore.named [-] Could not load panko
2020-09-13 21:34:12.370 11761 ERROR ceilometer.pipeline.base [-] Unable to load p
浏览 0提问于2020-09-13得票数 0
我在从公共存储库构建时遇到了问题，在本地安装Jenkins作为服务添加所有docker pipeline插件，但当我尝试构建时，我收到此错误 > git rev-list --no-walk d639281fcf8f6e5dab1cd633a0f7af0727ff7dc5 # timeout=10
[Pipeline] }
[Pipeline] // stage
[Pipeline] withEnv
[Pipeline] {
[Pipeline] isUnix
[Pipeline] sh
+ docker inspect -f . python:3.8.5
/var/lib/jenk
浏览 182提问于2021-11-21得票数 0
回答已采纳
我试图应用直方图逐行使用应用函数，但得到一个错误。下面的代码是实现
def f(row):
return np.histogram(row, bins=5,range=(1,10))
import torch
import cudf as df
torch.manual_seed(1)
bins = 3
feature = torch.randint(1, 50, (3, 4,7))
selected_feature = feature[:,:,3].float().cuda() # read all 4 elements in the 2nd dimension
feature_d
浏览 17提问于2022-05-20得票数 1
我正在学习本教程
我是在Vertex IA的工作台上运行这个的。
当我运行这段代码时
from kfp.v2 import compiler
compiler.Compiler().compile(pipeline, package_path='image_classif_pipeline.json')
我知道这个错误：
NotImplementedError: Input argument supports only the following types: PipelineParam, str, int, float, bool, dict, and list. Got:
浏览 20提问于2022-06-08得票数 1
2回答
我正在编写一个简单的Beam作业，将数据从GCS桶复制到BigQuery。代码如下所示：
from apache_beam.options.pipeline_options import GoogleCloudOptions
import apache_beam as beam
pipeline_options = GoogleCloudOptions(flags=sys.argv[1:])
pipeline_options.project = PROJECT_ID
pipeline_options.region = 'us-west1'
pipeline_options.j
浏览 0提问于2018-04-19得票数 2
1回答
我有这样的if else语句，如果条件为true，则执行if语句，但如果条件为false，则else语句未执行
steps{
script{
echo '*Stage3 - Trying to build python program and export the Artifact*'
pyInstallerOutput = bat(returnStdout: true, script: '@python -m PyInstaller -v').tri
浏览 4提问于2022-10-09得票数 -1
回答已采纳
我在dockerhub中有一个码头映像，我想将它作为代理添加到jenkins管道脚本中。作为映像的一部分，我执行git克隆，从github获取一个存储库，该存储库具有多个python脚本，对应于jenkins管道中的多个阶段。我试着到处搜索，但是我找不到有关如何访问jenkins管道中的码头容器中的文件的相关信息。
我在VM上运行jenkins，它已经安装了对接器。管道在码头容器上执行生成。由于管道的每个阶段都涉及许多步骤，所以我尝试尽可能多地使用python。
这就是我的dockerfile的样子，映像构建成功，我能够在dockerhub中托管它。当我运行容器时，我能够看到"jenk
浏览 1提问于2019-02-20得票数 3
回答已采纳
我正在使用Django-Python应用程序，我试图扩展我的管道，以便当用户注册使用Facebook时，他们同时注册到我的邮件列表(并发送了一封电子邮件进行验证)。如果用户使用传统的输入方法注册--但不通过Social auth.and返回此错误，这就很好了：
ValueError at /oauth/complete/facebook/ not enough values to unpack (expected 2, got 1)
下面是完整的堆栈跟踪：
File "C:\Users\crstu\AppData\Local\Programs\Python\Python36-32\li
浏览 2提问于2018-03-20得票数 0
回答已采纳
我想为tensorflow对象检测API将pipeline_pb2.TrainEvalPipelineConfig转换为JSON或YAML文件格式。我尝试使用以下命令转换protobuf文件： import tensorflow as tf
from google.protobuf import text_format
import yaml
from object_detection.protos import pipeline_pb2
def get_configs_from_pipeline_file(pipeline_config_path, config_override=No
浏览 71提问于2019-03-16得票数 0
回答已采纳
Python版本: 3.6.8
SpaCy版本: 2.1.4
只要试着import spacy
Traceback (most recent call last):
File "src/discovery/pipeline/news/news_pipeline.py", line 9, in <module>
from src.discovery.modules.news.pipeline.auginewspipeline import AugINewsPipeline
File "/local/apps/discopyusr1/discov
浏览 0提问于2019-06-18得票数 1
我一直在尝试让我的python脚本从Azure密钥库中检索一个秘密。对于身份验证，我一直在使用ServicePrincipal凭据和SecretClient类附带的Azure-密钥库-机密包。但是它会抛出一个错误，这可能是因为python包中的任何更新。有人能指出出什么问题了吗？
from azure.common.credentials import ServicePrincipalCredentials
from azure.keyvault.secrets import SecretClient
CLIENT_ID '...' #app_id
TENANT_ID =
浏览 6提问于2020-02-10得票数 2
回答已采纳
我试图使用WriteToKafka将数据发送到Python中的一个Kafka主题，使用Dataflow作为跑步者，通过Apache发送数据。
通过运行以下脚本：
with beam.Pipeline(options=beam_options) as p:
(p
| beam.Impulse()
| beam.Map(lambda input: (1, input))
| WriteToKafka(
producer_config={
&
浏览 6提问于2021-02-17得票数 1
回答已采纳
我有一个python函数，它接受一个参数作为输入，我想通过bash自动化并调用它。但是bash在调用变量时传递变量(字符串)时出现错误。
a="test"
python -c "from pipeline_runs.z_full_pipeline import test; test($a)"
失败与
NameError: name 'test' is not defined
但是，当变量为int时，同样的情况也会发生。
a="10"
python -c "from pipeline_runs.z_full_pipeline
浏览 0提问于2023-04-14得票数 1
回答已采纳
这是我的第一篇文章。我一直在尝试将功能与FeatureUnion和Pipeline相结合，但是当我添加一条tf-idf + svd piepline时，测试失败了，并出现了“尺寸不匹配”错误。我的简单任务是创建一个回归模型来预测搜索相关性。代码和错误报告如下。我的代码中有什么地方错了吗？
df = read_tsv_data(input_file)
df = tokenize(df)
df_train, df_test = train_test_split(df, test_size = 0.2, random_state=2016)
x_train = df_train['sq&#
浏览 11提问于2016-07-31得票数 1
回答已采纳
我使用的是django-pipeline 和django-storages
当我使用收集站上传和后处理(缩小)我的资产，我得到一个错误时，后处理。
更早的时候，收藏品工作得很好，没有出错。
这是完整的回溯
Traceback (most recent call last):
File "manage.py", line 10, in <module>
execute_from_command_line(sys.argv)
File "/app/.heroku/python/lib/python2.7/site-packages/django/
浏览 2提问于2016-11-23得票数 0
回答已采纳
您好，我在运行导入时遇到此错误
从azureml.pipeline.steps导入ParallelRunConfig，ParallelRunStep
错误是：
---------------------------------------------------------------------------
ImportError Traceback (most recent call last)
<ipython-input-10-a2ef999ba35b> in <module>
----> 1 f
浏览 19提问于2020-11-15得票数 0
我试图在s3boto中使用django-管线-1.1.27来压缩和过滤静态文件，然后将它们上传到s3桶中。如果我只是用：
PIPELINE_STORAGE = 'pipeline.storage.PipelineFinderStorage'
然后它就工作了，我得到了一个静态文件夹，其中包含了我配置的漂亮的版本文件。一旦我切换到
PIPELINE_STORAGE = 'storages.backends.s3boto.S3BotoStorage'
我得到了
Traceback (most recent call last):
File "manage.
浏览 6提问于2012-03-07得票数 5
回答已采纳
我正在尝试将通过Microsoft Azure Active Directory使用social_django进行身份验证的用户添加到用户组。这是我的pipleline.py
from django.db.models import signals
from django.dispatch import Signal
from social.pipeline.user import *
from django.contrib.auth.models import User, Group
from social.utils import module_member
def new_user
浏览 20提问于2017-12-22得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
