☰

jenkins中批量大小文本参数报错

tag-icon • tag-icon jenkins
jenkins中批量大小文本参数报错

我在 Jenkins 中构建了一个带有文本参数的构建，当我将大数据输入文本区域并尝试构建时，它会出现

[测试-保存txt到文件] $ /bin/sh -xe /tmp/hudson3834163952953567847.sh
严重：命令执行失败
java.io.IOException：无法运行程序“/bin/sh”（在目录“/var/lib/jenkins/workspace/TEST-save_txt_to_file”中）：java.io.IOException：错误=7，参数列表太长
    在 java.lang.ProcessBuilder.start（未知来源）
    位于 hudson.Proc$LocalProc。（Proc.java:244）
    位于 hudson.Proc$LocalProc。（Proc.java:216）
    在 hudson.Launcher$LocalLauncher.launch(Launcher.java:763)
    在 hudson.Launcher$ProcStarter.start(Launcher.java:353)
    在 hudson.Launcher$ProcStarter.join(Launcher.java:360)
    在 hudson.tasks.CommandInterpreter.perform（CommandInterpreter.java:91）
    在 hudson.tasks.CommandInterpreter.perform（CommandInterpreter.java:60）
    在 hudson.tasks.BuildStepMonitor$1.perform(BuildStepMonitor.java:19)
    在 hudson.model.AbstractBuild$AbstractBuildExecution.perform(AbstractBuild.java:814)
    在 hudson.model.Build$BuildExecution.build(Build.java:199)
    在 hudson.model.Build$BuildExecution.doRun（Build.java:160）
    在 hudson.model.AbstractBuild$AbstractBuildExecution.run(AbstractBuild.java:593)
    在 hudson.model.Run.execute（Run.java:1568）
    在 hudson.model.FreeStyleBuild.run(FreeStyleBuild.java:46)
    在 hudson.model.ResourceController.execute（ResourceController.java:88）
    在 hudson.model.Executor.run（Executor.java:237）
原因：java.io.IOException：java.io.IOException：错误=7，参数列表太长
    位于 java.lang.UNIXProcess。（未知来源）
    在 java.lang.ProcessImpl.start（未知来源）
    ... 另外 17 个
构建步骤“执行 shell”将构建标记为失败
完成：失败

有什么解决方法吗？谢谢！

我的环境：

java.runtime.版本 1.6.0_41-b02 org.jenkins-ci.main:jenkins-war:1.502

答案1

这是由 Linux 限制导致的，即参数大小不能超过 128kb，请参阅 Linux 内核常量：MAX_ARG_STRLEN https://github.com/torvalds/linux/blob/master/include/uapi/linux/binfmts.h

在 Jenkins 中，一旦您从/向超出此值的变量读取数据，就会遇到此错误。就我而言，我有一个 github webhook，它启动了一个 Jenkins 作业，并将有效负载参数设置为某个大于此限制的字符串。尝试读取此参数会引发此错误。

为了解决这个问题，我有一个子作业，它使用 rest-api 调用从父级读取值

您可以让父作业抛出失败，但在所有情况下都允许启动子作业。下面是我用来提取信息的略微改进的函数（为简洁起见，删除了错误检查和注释）

def get_parameter_value_from_parent():
    host = 'https://[YOUR_COMPANY].ci.cloudbees.com'
    this_build_url = os.environ.get('BUILD_URL')
    request_auth = (JENKINS_USER, JENKINS_TOKEN)

    url = '{0}/api/json'.format(this_build_url)
    parameter_name = 'payload'
    payload = ''

    #
    # Get the upstreamBuild number, and the upstreamUrl
    # so we can put together a link to the upstream job
    #

    response = requests.get(url, auth=request_auth)
    this_build = json.loads(response)

    build_number = ''
    short_url = ''
    actions = this_build['actions']
    for action in actions:
        if action.get('causes'):
            for cause in action.get('causes'):
                build_number = cause['upstreamBuild']
                short_url = cause['upstreamUrl']

    parent_url = '{host}/{short_url}{build}/api/json'.format(host=host,
            short_url=short_url, build=build_number)

    #
    # Now get the payload from the parent job by making REST api call
    #

    response = requests.get(parent_url, auth=request_auth)
    upstream_build = json.loads(response)

    actions = upstream_build['actions']
    for action in actions:
        if action.get('parameters'):
            for parameter in action.get('parameters'):
                if parameter['name'] == parameter_name:
                    value = parameter['value']
                    payload = value
                    return payload

    print 'Error: Unable to return payload from parent jenkins job: {0}'.format(parent_url)
    sys.exit(1)

答案2

我可以先将参数值回显到文件中，从而使其达到我的目的，例如：

echo "${BIG_TEXT_PARAM}" > ${WORKSPACE}/BIG_TEXT_PARAM.txt

cat ${WORKSPACE}/BIG_TEXT_PARAM.txt

请注意“echo”命令中双引号的使用。

相关内容