Docker 컨테이너에서 호스트로 파일 복사


1707

Docker를 사용하여 CI (Continuous Integration) 서버에 대한 종속성을 빌드하려고하므로 에이전트 자체에 모든 런타임 및 라이브러리를 설치할 필요가 없습니다.

이를 위해 컨테이너 내부에 빌드 된 빌드 아티팩트를 다시 호스트로 복사해야합니다. 가능합니까?


너희들은 여기 내 해커 방법을 좋아 있습니다 stackoverflow.com/a/55876794/990618
콜린 라마레

1
답변 맨 아래에있는 도커 선장의 정확한 답변입니다.
burtsevyg

답변:


2943

컨테이너에서 호스트로 파일을 복사하려면 다음 명령을 사용할 수 있습니다

docker cp <containerId>:/file/path/within/container /host/path/target

예를 들면 다음과 같습니다.

$ sudo docker cp goofy_roentgen:/out_read.jpg .

여기 goofy_roentgen 은 다음 명령에서 얻은 컨테이너 이름입니다.

$ sudo docker ps

CONTAINER ID        IMAGE               COMMAND             CREATED             STATUS              PORTS                                            NAMES
1b4ad9311e93        bamos/openface      "/bin/bash"         33 minutes ago      Up 33 minutes       0.0.0.0:8000->8000/tcp, 0.0.0.0:9000->9000/tcp   goofy_roentgen

컨테이너 ID를 (일부) 사용할 수도 있습니다 . 다음 명령은 첫 번째 명령과 동일합니다

$ sudo docker cp 1b4a:/out_read.jpg .

42
임시 Linux 환경에서 도커를 사용하는 경우 최신 컨테이너를 얻는 편리한 방법이 있습니다 docker ps -alq.
Josh Habdas 2016 년

37
이 cp 명령이 작동 그대로 디렉토리 트리를 복사뿐만 아니라 (단지 하나의 파일)에 대한.
ecoe

88
최신 버전의 도커에서는 다음을 사용하여 양방향으로 (호스트에서 컨테이너로 또는 컨테이너에서 호스트로) 복사 할 수 있습니다.docker cp ...
Freedom_Ben

9
docker cp -L심볼릭 링크를 복사 해야 했습니다
Harrison Powers

24
참고 : cp 명령을 사용하기 위해 컨테이너를 실행할 필요는 없습니다. 컨테이너가 계속 충돌하면 편리합니다.
Martlark

219

사용할 필요는 없습니다 docker run.

당신은 그것을 할 수 있습니다 docker create.

에서 워드 프로세서 :

docker create명령은 지정된 이미지 위에 기록 가능한 콘테이너 층을 생성하고, 지정된 명령을 실행을 위해 준비. 그런 다음 컨테이너 ID가에 인쇄됩니다 STDOUT. docker run -d컨테이너가 시작되지 않았다는 점 을 제외하고 는 비슷합니다 .

그래서 당신은 할 수 있습니다 :

docker create -ti --name dummy IMAGE_NAME bash
docker cp dummy:/path/to/file /dest/to/file
docker rm -f dummy

여기서는 컨테이너를 시작하지 않습니다. 그것은 나에게 유익 해 보였다.


19
더 많은 투표가 필요합니다. 컨테이너에 무언가를 만들고 출력을 복사해야 할 때 좋습니다.
Honza Kalfus

4
@ HonzaKalfus 나는 이것이 더 높아야한다는 데 동의합니다. 이것이 바로 내가 추구 한 것입니다. 알려진 환경 (특정 버전의 amazon linux)을 사용하여 바이너리 파일을 만들 수 있도록 이것을 사용했습니다. 도커를 완전히 빌드하고 결과 바이너리를 추출하는 쉘 스크립트를 만들 수있었습니다! 완전한.
Mark

1
되어 -ti필요와 bash요구?
jII

@ jII, 나는 나중에 도커를 실행하기 때문에 그것을했다. 간단한 경우에는 필요하지 않지만 여기에도 해를 끼치 지 않습니다.
Ishan Bhatt

어떻게 든 와일드 카드를 사용할 수 있습니까? 내 말은 ... 버전 번호가 있으므로 복사해야하는 파일의 정확한 이름을 모른다.
juzzlin

87

"볼륨"을 마운트하고 아티팩트를 여기에 복사하십시오.

mkdir artifacts
docker run -i -v ${PWD}/artifacts:/artifacts ubuntu:14.04 sh << COMMANDS
# ... build software here ...
cp <artifact> /artifacts
# ... copy more artifacts into `/artifacts` ...
COMMANDS

그런 다음 빌드가 완료되고 컨테이너가 더 이상 실행되지 않으면 이미 빌드에서 아티팩트를 artifacts호스트 의 디렉토리 로 복사했습니다 .

편집하다

주의 사항 : 이렇게 하면 docker 사용자의 사용자 ID가 현재 실행중인 사용자의 사용자 ID와 일치하는 문제가 발생할 수 있습니다. 즉, 파일 /artifacts은 docker 컨테이너 내부에서 사용되는 사용자의 UID와 함께 사용자가 소유 한 것으로 표시됩니다. 이 문제를 해결하는 방법은 발신 사용자의 UID를 사용하는 것입니다.

docker run -i -v ${PWD}:/working_dir -w /working_dir -u $(id -u) \
    ubuntu:14.04 sh << COMMANDS
# Since $(id -u) owns /working_dir, you should be okay running commands here
# and having them work. Then copy stuff into /working_dir/artifacts .
COMMANDS

7
실제로 chown명령을 사용 하여 호스트 시스템의 사용자 ID 및 그룹 ID를 일치 시킬 수 있습니다 .
Dimchansky 2015 년

@Frondor 참조 볼륨 설정 참조 docs.docker.com/compose/compose-file/...
djhaskin987

이미했지만 작동하지 않습니다. 컨테이너가 파일을 처음으로 볼륨에 복사 한 후에는 다음에 볼륨이 더 이상 비워지지 않으며 파일이 새 파일로 대체되지 않습니다. 컨테이너는 호스트 파일 (컨테이너 이미지를 처음 마운트 할 때 복사 된 파일)에 우선 순위를 부여합니다.
Frondor

그 자체의 SO 질문이 될 수있는 것 같습니다. @Frondor
djhaskin987

1
나는 당신에게 맥주 친구를 사요! 감사!
Dimitar Vukman

27

볼륨을 마운트하고 아티팩트를 복사하고 소유자 ID 및 그룹 ID를 조정하십시오.

mkdir artifacts
docker run -i --rm -v ${PWD}/artifacts:/mnt/artifacts centos:6 /bin/bash << COMMANDS
ls -la > /mnt/artifacts/ls.txt
echo Changing owner from \$(id -u):\$(id -g) to $(id -u):$(id -u)
chown -R $(id -u):$(id -u) /mnt/artifacts
COMMANDS

24

TLDR;

$ docker run --rm -iv${PWD}:/host-volume my-image sh -s <<EOF
chown $(id -u):$(id -g) my-artifact.tar.xz
cp -a my-artifact.tar.xz /host-volume
EOF

기술

docker run호스트 볼륨, chown이슈, 호스트 볼륨 의 이슈 cp:

$ docker build -t my-image - <<EOF
> FROM busybox
> WORKDIR /workdir
> RUN touch foo.txt bar.txt qux.txt
> EOF
Sending build context to Docker daemon  2.048kB
Step 1/3 : FROM busybox
 ---> 00f017a8c2a6
Step 2/3 : WORKDIR /workdir
 ---> Using cache
 ---> 36151d97f2c9
Step 3/3 : RUN touch foo.txt bar.txt qux.txt
 ---> Running in a657ed4f5cab
 ---> 4dd197569e44
Removing intermediate container a657ed4f5cab
Successfully built 4dd197569e44

$ docker run --rm -iv${PWD}:/host-volume my-image sh -s <<EOF
chown -v $(id -u):$(id -g) *.txt
cp -va *.txt /host-volume
EOF
changed ownership of '/host-volume/bar.txt' to 10335:11111
changed ownership of '/host-volume/qux.txt' to 10335:11111
changed ownership of '/host-volume/foo.txt' to 10335:11111
'bar.txt' -> '/host-volume/bar.txt'
'foo.txt' -> '/host-volume/foo.txt'
'qux.txt' -> '/host-volume/qux.txt'

$ ls -n
total 0
-rw-r--r-- 1 10335 11111 0 May  7 18:22 bar.txt
-rw-r--r-- 1 10335 11111 0 May  7 18:22 foo.txt
-rw-r--r-- 1 10335 11111 0 May  7 18:22 qux.txt

heredocchown 내 에서 호출 하면 실행중인 컨테이너 외부에서 값을 가져 오기 때문에이 트릭이 작동합니다 . 즉, 도커 호스트입니다.$(id -u):$(id -g)

이점은 다음과 같습니다.

  • 당신은 docker container run --name또는 docker container create --name전에 필요가 없습니다
  • 당신은 docker container rm후 필요가 없습니다

2
cp볼륨 기반 답변과 비교를 위해 찬성했습니다 . 또한, 대한 id소유권 트릭, 그 진짜 두통은 때로는
마크 Ghorayeb

18

대부분의 답변은 컨테이너 docker cp가 작동 해야 작동한다는 것을 나타내지 않습니다 .

docker build -t IMAGE_TAG .
docker run -d IMAGE_TAG
CONTAINER_ID=$(docker ps -alq)
# If you do not know the exact file name, you'll need to run "ls"
# FILE=$(docker exec CONTAINER_ID sh -c "ls /path/*.zip")
docker cp $CONTAINER_ID:/path/to/file .
docker stop $CONTAINER_ID

3
BTW, 컨테이너 가 실행 중 / 중지 되어야 하는지 또는 호스트 / 가상화 기술의 유형에 따라 달라지는 지 여부 . 현재 도커 문서 에는 "컨테이너가 실행 중이거나 중지 된 컨테이너 일 수 있습니다."라고 표시되어 있습니다. 수락 된 답변에 대한 의견을 포함하여 SO의 여러 위치에 "이것은 중지 된 컨테이너에서도 작동합니다"라고 말합니다. 아래는 , 명백하게 필요파일을 복사하기 전에 컨테이너를 중지 . Windows Hyper-V
ToolmakerSteve

컨테이너가 중지 된 경우에도 복사가 작동합니다.
누가 복음

17

실행중인 컨테이너가없고 이미지 만 있고 텍스트 파일 만 복사한다고 가정하면 다음과 같이 할 수 있습니다.

docker run the-image cat path/to/container/file.txt > path/to/host/file.txt

7

Docker for Mac을 사용하는 사람을 위해 이것을 게시하고 있습니다. 이것이 나를 위해 일한 것입니다.

 $ mkdir mybackup # local directory on Mac

 $ docker run --rm --volumes-from <containerid> \
    -v `pwd`/mybackup:/backup \  
    busybox \                   
    cp /data/mydata.txt /backup 

-v해당 backup디렉토리를 사용하여 마운트하면 자동으로 생성됩니다.

언젠가 누군가에게 이것이 유용하기를 바랍니다. :)


docker-compose를 사용하는 경우 volume-from은 버전 3 이상에서 더 이상 사용되지 않습니다.
mulg0r

mulg0r의 설명에 추가하려면 stackoverflow.com/a/45495380/199364-v.3 에서 config.yml의 volumes루트에 명령 을 배치하여 여러 컨테이너가 볼륨에 액세스 할 수 있도록합니다.
ToolmakerSteve

5

실행중인 컨테이너 대신 이미지 에서 파일을 가져 오려면 다음과 같이하십시오 .

docker run --rm <image> cat <source> > <local_dest>

그러면 컨테이너가 나타나고 새 파일을 작성한 다음 컨테이너를 제거합니다. 그러나 한 가지 단점은 파일 권한과 수정 된 날짜가 유지되지 않는다는 것입니다.



5

Docker 19.03의 출시로 컨테이너 만들기와 이미지 빌드를 건너 뛸 수 있습니다. BuildKit 기반 빌드에는 출력 대상을 변경하는 옵션이 있습니다. 이를 사용하여 빌드 결과를 이미지가 아닌 로컬 디렉토리에 쓸 수 있습니다. 예를 들어 다음은 go 바이너리 빌드입니다.

$ ls
Dockerfile  go.mod  main.go

$ cat Dockerfile
FROM golang:1.12-alpine as dev
RUN apk add --no-cache git ca-certificates
RUN adduser -D appuser
WORKDIR /src
COPY . /src/
CMD CGO_ENABLED=0 go build -o app . && ./app

FROM dev as build
RUN CGO_ENABLED=0 go build -o app .
USER appuser
CMD [ "./app" ]

FROM scratch as release
COPY --from=build /etc/passwd /etc/group /etc/
COPY --from=build /src/app /app
USER appuser
CMD [ "/app" ]

FROM scratch as artifact
COPY --from=build /src/app /app

FROM release

위의 Dockerfile에서 내보내려는 artifact파일 만 포함하는 스테이지를 작성 중입니다. 새로 도입 된 --output플래그를 사용하면 이미지 대신 로컬 디렉토리에 해당 플래그를 쓸 수 있습니다. 이 작업은 19.03과 함께 제공되는 BuildKit 엔진으로 수행해야합니다.

$ DOCKER_BUILDKIT=1 docker build --target artifact --output type=local,dest=. .
[+] Building 43.5s (12/12) FINISHED
 => [internal] load build definition from Dockerfile                                                                              0.7s
 => => transferring dockerfile: 572B                                                                                              0.0s
 => [internal] load .dockerignore                                                                                                 0.5s
 => => transferring context: 2B                                                                                                   0.0s
 => [internal] load metadata for docker.io/library/golang:1.12-alpine                                                             0.9s
 => [dev 1/5] FROM docker.io/library/golang:1.12-alpine@sha256:50deab916cce57a792cd88af3479d127a9ec571692a1a9c22109532c0d0499a0  22.5s
 => => resolve docker.io/library/golang:1.12-alpine@sha256:50deab916cce57a792cd88af3479d127a9ec571692a1a9c22109532c0d0499a0       0.0s
 => => sha256:1ec62c064901392a6722bb47a377c01a381f4482b1ce094b6d28682b6b6279fd 155B / 155B                                        0.3s
 => => sha256:50deab916cce57a792cd88af3479d127a9ec571692a1a9c22109532c0d0499a0 1.65kB / 1.65kB                                    0.0s
 => => sha256:2ecd820bec717ec5a8cdc2a1ae04887ed9b46c996f515abc481cac43a12628da 1.36kB / 1.36kB                                    0.0s
 => => sha256:6a17089e5a3afc489e5b6c118cd46eda66b2d5361f309d8d4b0dcac268a47b13 3.81kB / 3.81kB                                    0.0s
 => => sha256:89d9c30c1d48bac627e5c6cb0d1ed1eec28e7dbdfbcc04712e4c79c0f83faf17 2.79MB / 2.79MB                                    0.6s
 => => sha256:8ef94372a977c02d425f12c8cbda5416e372b7a869a6c2b20342c589dba3eae5 301.72kB / 301.72kB                                0.4s
 => => sha256:025f14a3d97f92c07a07446e7ea8933b86068d00da9e252cf3277e9347b6fe69 125.33MB / 125.33MB                               13.7s
 => => sha256:7047deb9704134ff71c99791be3f6474bb45bc3971dde9257ef9186d7cb156db 125B / 125B                                        0.8s
 => => extracting sha256:89d9c30c1d48bac627e5c6cb0d1ed1eec28e7dbdfbcc04712e4c79c0f83faf17                                         0.2s
 => => extracting sha256:8ef94372a977c02d425f12c8cbda5416e372b7a869a6c2b20342c589dba3eae5                                         0.1s
 => => extracting sha256:1ec62c064901392a6722bb47a377c01a381f4482b1ce094b6d28682b6b6279fd                                         0.0s
 => => extracting sha256:025f14a3d97f92c07a07446e7ea8933b86068d00da9e252cf3277e9347b6fe69                                         5.2s
 => => extracting sha256:7047deb9704134ff71c99791be3f6474bb45bc3971dde9257ef9186d7cb156db                                         0.0s
 => [internal] load build context                                                                                                 0.3s
 => => transferring context: 2.11kB                                                                                               0.0s
 => [dev 2/5] RUN apk add --no-cache git ca-certificates                                                                          3.8s
 => [dev 3/5] RUN adduser -D appuser                                                                                              1.7s
 => [dev 4/5] WORKDIR /src                                                                                                        0.5s
 => [dev 5/5] COPY . /src/                                                                                                        0.4s
 => [build 1/1] RUN CGO_ENABLED=0 go build -o app .                                                                              11.6s
 => [artifact 1/1] COPY --from=build /src/app /app                                                                                0.5s
 => exporting to client                                                                                                           0.1s
 => => copying files 10.00MB                                                                                                      0.1s

빌드가 완료된 후 app바이너리를 내보냈습니다.

$ ls
Dockerfile  app  go.mod  main.go

$ ./app
Ready to receive requests on port 8080

Docker는 --output업스트림 BuildKit 저장소에 문서화 된 다른 옵션을 제공합니다 . https://github.com/moby/buildkit#output


표준 빌드 캐시는 출력 빌드에 사용되지 않습니다. 나쁘다
burtsevyg

@burtsevyg Buildkit은 다른 캐시 환경을 사용하는 다른 빌더입니다. 훨씬 더 효율적인 캐시입니다.
BMitch

빌드 노드를 개선하겠습니다.
burtsevyg

4

보다 일반적인 솔루션 으로 Jenkins가 Docker 컨테이너 내부에 빌드 할 수있는 CloudBees 플러그인이 있습니다 . Docker 레지스트리에서 사용할 이미지를 선택하거나 빌드하고 사용할 Dockerfile을 정의 할 수 있습니다.

작업 공간을 컨테이너에 볼륨으로 (적절한 사용자와 함께) 저장하고 작업 디렉토리로 설정하고 요청한 명령 (컨테이너 내부)을 수행합니다. image.inside () {} 명령으로 docker-workflow 플러그인 (UI보다 코드를 선호하는 경우)을 사용하여이를 수행 할 수도 있습니다.

기본적으로이 모든 것이 CI / CD 서버에 구운 후 일부에 구워졌습니다.


4

이 명령에 PowerShell (Admin)을 사용했습니다.

docker cp {container id}:{container path}/error.html  C:\\error.html

docker cp ff3a6608467d:/var/www/app/error.html  C:\\error.html

2

또 다른 좋은 옵션은 먼저 컨테이너를 빌드 한 다음 쉘 인터프리터와 함께 -c 플래그를 사용하여 실행하여 일부 쉼표를 실행하는 것입니다.

docker run --rm -i -v <host_path>:<container_path> <mydockerimage> /bin/sh -c "cp -r /tmp/homework/* <container_path>"

위의 명령은 다음을 수행합니다.

-i = 컨테이너를 대화식 모드로 실행

--rm = 실행 후 컨테이너를 제거했습니다.

-v = 호스트 경로에서 컨테이너 경로로 볼륨으로 폴더를 공유했습니다.

마지막으로 / bin / sh -c를 사용하면 명령을 매개 변수로 도입 할 수 있으며이 명령은 숙제 파일을 컨테이너 경로에 복사합니다.

이 추가 답변이 도움이 되었기를 바랍니다.


1

컨테이너 외부에서 호스트 시스템에 데이터 디렉토리를 작성하고 컨테이너 내부에서 볼 수있는 디렉토리에 마운트하십시오. 이렇게하면 파일이 호스트 시스템의 알려진 위치에 배치되고 호스트 시스템의 도구 및 응용 프로그램이 파일에 쉽게 액세스 할 수 있습니다

docker run -d -v /path/to/Local_host_dir:/path/to/docker_dir docker_image:tag

4
그러면 호스트에서 컨테이너로 디렉토리와 디렉토리의 내용을 주입 할 수 있습니다. 컨테이너에서 호스트로 파일을 다시 복사 할 수 없습니다.
BMitch

호스트 폴더의 권한이 매우 넓은 경우입니까?
giorgiosironi

0

파일을 복사 할 경로를 작성하고 다음을 사용하십시오.

docker run -d -v hostpath:dockerimag

0

하나의 폴더 만 마운트하려는 경우 bind대신 volume컨테이너를위한 특수 저장소를 만들지 않고 사용할 수 있습니다 .

  1. 태그를 사용하여 이미지를 작성하십시오.

    docker build . -t <image>

  2. 이미지를 실행하고 app.py가 저장하는 현재 $ (pwd) 디렉토리를 바인딩하고 컨테이너 내부의 / root / example /에 맵핑하십시오.

    docker run --mount type=bind,source="$(pwd)",target=/root/example/ <image> python app.py


0

이것은 파이썬과 같은 SDK에서 수행 할 수도 있습니다. 컨테이너가 이미 구축 된 경우 콘솔을 통해 이름을 조회 할 수 있습니다 (docker ps -a )을 은 과학자와 형용사 (예 : "relaxed_pasteur")를 연결 한 것으로 보입니다.

체크 아웃 help(container.get_archive):

Help on method get_archive in module docker.models.containers:

get_archive(path, chunk_size=2097152) method of docker.models.containers.Container instance
    Retrieve a file or folder from the container in the form of a tar
    archive.

    Args:
        path (str): Path to the file or folder to retrieve
        chunk_size (int): The number of bytes returned by each iteration
            of the generator. If ``None``, data will be streamed as it is
            received. Default: 2 MB

    Returns:
        (tuple): First element is a raw tar data stream. Second element is
        a dict containing ``stat`` information on the specified ``path``.

    Raises:
        :py:class:`docker.errors.APIError`
            If the server returns an error.

    Example:

        >>> f = open('./sh_bin.tar', 'wb')
        >>> bits, stat = container.get_archive('/bin/sh')
        >>> print(stat)
        {'name': 'sh', 'size': 1075464, 'mode': 493,
         'mtime': '2018-10-01T15:37:48-07:00', 'linkTarget': ''}
        >>> for chunk in bits:
        ...    f.write(chunk)
        >>> f.close()

따라서 이와 같은 것이 컨테이너의 지정된 경로 (/ output)에서 호스트 시스템으로 가져 와서 tar를 압축 해제합니다.

import docker
import os
import tarfile

# Docker client
client = docker.from_env()
#container object
container = client.containers.get("relaxed_pasteur")
#setup tar to write bits to
f = open(os.path.join(os.getcwd(),"output.tar"),"wb")
#get the bits
bits, stat = container.get_archive('/output')
#write the bits
for chunk in bits:
    f.write(chunk)
f.close()
#unpack
tar = tarfile.open("output.tar")
tar.extractall()
tar.close()
당사 사이트를 사용함과 동시에 당사의 쿠키 정책개인정보 보호정책을 읽고 이해하였음을 인정하는 것으로 간주합니다.
Licensed under cc by-sa 3.0 with attribution required.