在 Windows 上使用 download-frozen-image-v2.sh 下载 Docker 映像

Question

在 Windows 上使用 download-frozen-image-v2.sh 下载 Docker 映像

我正在努力在一台未安装（且不能安装）Docker 的联网 Windows 计算机上下载 Docker 映像，以传输到一台安装了 Docker 的非联网 Linux 计算机。我用来git-bash运行download-frozen-image-v2.sh。一切都按预期工作，直到脚本开始下载任何给定图像的最后一层。在最后一层，json 文件返回为空。通过 echo 语句，我可以看到一切都工作完美，直到第 119-142 行

jq "$addJson + ." > "$dir/$layerId/json" <<-'EOJSON'
                {
                    "created": "0001-01-01T00:00:00Z",
                    "container_config": {
                        "Hostname": "",
                        "Domainname": "",
                        "User": "",
                        "AttachStdin": false,
                        "AttachStdout": false,
                        "AttachStderr": false,
                        "Tty": false,
                        "OpenStdin": false,
                        "StdinOnce": false,
                        "Env": null,
                        "Cmd": null,
                        "Image": "",
                        "Volumes": null,
                        "WorkingDir": "",
                        "Entrypoint": null,
                        "OnBuild": null,
                        "Labels": null
                    }
                }
            EOJSON

Run Code Online (Sandbox Code Playgroud)

仅在最后一层，此代码会生成一个空的 json 文件，这又会在第 173 行中创建错误

jq --raw-output "$imageOldConfig + del(.history, .rootfs)" "$dir/$configFile" > "$dir/$imageId/json"

jq: error: syntax error, unexpected '+', expecting $end (Windows cmd shell quoting issues?) at <top-level>, line 1:
 + del(.history, .rootfs)
jq: 1 compile error

Run Code Online (Sandbox Code Playgroud)

更新

复制的确切步骤

在 Windows 10 计算机上执行。

1) 安装 Windows 版 scoop https://scoop.sh/

2）在Powershell中 scoop install git curl jq go tar

3）git-bash

4）在git-bash中 curl -o download-frozen-image-v2.sh https://raw.githubusercontent.com/moby/moby/master/contrib/download-frozen-image-v2.sh

5）bash download-frozen-image-vs.sh ubuntu ubuntu:latest

以上将导致上述错误。

回应下面的@peak

我使用的命令bash download-frozen-image-v2.sh ubuntu ubuntu:latest应该下载 5 层。前4层下载完美，只有最后一层失败。我对其他几个图像尝试了这个过程，但在最后一层总是失败。

添加Json:

{ id: "ee6b1042efee4fb07d2fe1a5079ce498567e6f5ac849413f0e623d4582da5bc9", parent: "80a2fb00dfe137a28c24fbc39fde656650cd68028d612e6f33912902d887b108" }

Run Code Online (Sandbox Code Playgroud)

目录/配置文件：

ubuntu/113a43faa1382a7404681f1b9af2f0d70b182c569aab71db497e33fa59ed87e6.json

Run Code Online (Sandbox Code Playgroud)

dir/config文件内容：

{
"architecture": "amd64",
  "config": {
    "Hostname": "",
    "Domainname": "",
    "User": "",
    "AttachStdin": false,
    "AttachStdout": false,
    "AttachStderr": false,
    "Tty": false,
    "OpenStdin": false,
    "StdinOnce": false,
    "Env": [
      "PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin"
    ],
    "Cmd": [
      "/bin/bash"
    ],
    "ArgsEscaped": true,
    "Image": "sha256:c2775c69594daa3ee360d8e7bbca93c65d9c925e89bd731f12515f9bf8382164",
    "Volumes": null,
    "WorkingDir": "",
    "Entrypoint": null,
    "OnBuild": null,
    "Labels": null
  },
  "container": "6713e927cc43b61a4ce3950a69907336ff55047bae9393256e32613a54321c70",
  "container_config": {
    "Hostname": "6713e927cc43",
    "Domainname": "",
    "User": "",
    "AttachStdin": false,
    "AttachStdout": false,
    "AttachStderr": false,
    "Tty": false,
    "OpenStdin": false,
    "StdinOnce": false,
    "Env": [
      "PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin"
    ],
    "Cmd": [
      "/bin/sh",
      "-c",
      "#(nop) ",
      "CMD [\"/bin/bash\"]"
    ],
    "ArgsEscaped": true,
    "Image": "sha256:c2775c69594daa3ee360d8e7bbca93c65d9c925e89bd731f12515f9bf8382164",
    "Volumes": null,
    "WorkingDir": "",
    "Entrypoint": null,
    "OnBuild": null,
    "Labels": {}
  },
  "created": "2018-06-05T21:20:54.310450149Z",
  "docker_version": "17.06.2-ce",
  "history": [
    {
      "created": "2018-06-05T21:20:51.286433694Z",
      "created_by": "/bin/sh -c #(nop) ADD file:28c0771e44ff530dba3f237024acc38e8ec9293d60f0e44c8c78536c12f13a0b in / "
    },
    {
      "created": "2018-06-05T21:20:52.045074543Z",
      "created_by": "/bin/sh -c set -xe \t\t&& echo '#!/bin/sh' > /usr/sbin/policy-rc.d \t&& echo 'exit 101' >> /usr/sbin/policy-rc.d \t&& chmod +x /usr/sbin/policy-rc.d \t\t&& dpkg-divert --local --rename --add /sbin/initctl \t&& cp -a /usr/sbin/policy-rc.d /sbin/initctl \t&& sed -i 's/^exit.*/exit 0/' /sbin/initctl \t\t&& echo 'force-unsafe-io' > /etc/dpkg/dpkg.cfg.d/docker-apt-speedup \t\t&& echo 'DPkg::Post-Invoke { \"rm -f /var/cache/apt/archives/*.deb /var/cache/apt/archives/partial/*.deb /var/cache/apt/*.bin || true\"; };' > /etc/apt/apt.conf.d/docker-clean \t&& echo 'APT::Update::Post-Invoke { \"rm -f /var/cache/apt/archives/*.deb /var/cache/apt/archives/partial/*.deb /var/cache/apt/*.bin || true\"; };' >> /etc/apt/apt.conf.d/docker-clean \t&& echo 'Dir::Cache::pkgcache \"\"; Dir::Cache::srcpkgcache \"\";' >> /etc/apt/apt.conf.d/docker-clean \t\t&& echo 'Acquire::Languages \"none\";' > /etc/apt/apt.conf.d/docker-no-languages \t\t&& echo 'Acquire::GzipIndexes \"true\"; Acquire::CompressionTypes::Order:: \"gz\";' > /etc/apt/apt.conf.d/docker-gzip-indexes \t\t&& echo 'Apt::AutoRemove::SuggestsImportant \"false\";' > /etc/apt/apt.conf.d/docker-autoremove-suggests"
    },
    {
      "created": "2018-06-05T21:20:52.712120056Z",
      "created_by": "/bin/sh -c rm -rf /var/lib/apt/lists/*"
    },
    {
      "created": "2018-06-05T21:20:53.405342638Z",
      "created_by": "/bin/sh -c sed -i 's/^#\\s*\\(deb.*universe\\)$/\\1/g' /etc/apt/sources.list"
    },
    {
      "created": "2018-06-05T21:20:54.091704323Z",
      "created_by": "/bin/sh -c mkdir -p /run/systemd && echo 'docker' > /run/systemd/container"
    },
    {
      "created": "2018-06-05T21:20:54.310450149Z",
      "created_by": "/bin/sh -c #(nop)  CMD [\"/bin/bash\"]",
      "empty_layer": true
    }
  ],
  "os": "linux",
  "rootfs": {
    "type": "layers",
    "diff_ids": [
      "sha256:db9476e6d963ed2b6042abef1c354223148cdcdbd6c7416c71a019ebcaea0edb",
      "sha256:3a89e0d8654e098e949764b1cb23018e27f299b0931c5fd41c207d610ff356c4",
      "sha256:904d60939c360b5f528b886c1b534855a008f9a7fd411d4977e09aa7de74c834",
      "sha256:a20a262b87bd8a00717f3b30c001bcdaf0fd85d049e6d10500597caa29c013c5",
      "sha256:b6f13d447e00fba3b9bd10c1e5c6697e913462f44aa24af349bfaea2054e32f4"
    ]
  }
}

Run Code Online (Sandbox Code Playgroud)

任何有助于弄清楚这里发生的事情的帮助将不胜感激。

谢谢。

Answer 1

Jef*_*ado 5

我无法告诉你为什么会发生这种情况，但这似乎是 jq 解析输入文件的方式存在问题。读取文件时出现段错误。这是 Windows 版本中的一个已知问题，该问题是由文件路径的长度触发的。

幸运的是，有一种方法可以解决这个问题，即修改脚本以违背所有传统观念，并将cat文件修改为 jq.txt。

该脚本没有很好地利用 jq 并手动构建一些 json，因此需要一些额外的修复。解析时会出现错误INVALID_CHARACTER。这可能是这个问题的表现，因为脚本手动构建了很多 jq 程序。

我提出了更新文件的要点，至少不会出错，检查它是否按预期工作。

更改从第 172行和第 342行开始。

它构建清单的方式很混乱。我已经对其进行了一些清理，删除了所有字符串插值，而不是将所有参数作为参数传递给 jq。

# munge the top layer image manifest to have the appropriate image configuration for older daemons
local imageOldConfig="$(cat "$dir/$imageId/json" | jq --raw-output --compact-output '{ id: .id } + if .parent then { parent: .parent } else {} end')"
cat "$dir/$configFile" | jq --raw-output "$imageOldConfig + del(.history, .rootfs)" > "$dir/$imageId/json"

local manifestJsonEntry="$(
    jq --raw-output --compact-output -n \
        --arg configFile "$configFile" \
        --arg repoTags "${image#library\/}:$tag" \
        --argjson layers "$(IFS=$'\n'; jq --arg a "${layerFiles[*]}" -n '$a | split("\n")')" \
        '{
            Config: $configFile,
            RepoTags: [ $repoTags ],
            Layers: $layers
        }'
)"

Run Code Online (Sandbox Code Playgroud)

归档时间：	7 年，4 月前
查看次数：	2258 次
最近记录：	7 年，4 月前