xargs로 쉘 함수 호출

xargs를 사용하여보다 복잡한 함수를 병렬로 호출하려고합니다.

#!/bin/bash
echo_var(){
    echo $1
    return 0
}
seq -f "n%04g" 1 100 |xargs -n 1 -P 10 -i echo_var {} 
exit 0

이것은 오류를 반환

xargs: echo_var: No such file or directory

xargs를 사용하여이 작업을 수행하는 방법 또는 다른 솔루션을 환영하는 방법에 대한 모든 아이디어를 환영합니다.

함수를 내 보내면 (추천되지 않은) 기능이 수행됩니다.

export -f echo_var
seq -f "n%04g" 1 100 | xargs -n 1 -P 10 -I {} bash -c 'echo_var "$@"' _ {}

printf외부 대신 내장을 사용할 수 있습니다 seq.

printf "n%04g\n" {1..100} | xargs -n 1 -P 10 -I {} bash -c 'echo_var "$@"' _ {}

또한이를 사용 return 0하고 exit 0좋아하면 앞에 오는 명령으로 생성 될 수있는 모든 오류 값이 마스크됩니다. 또한 오류가 없으면 기본값이므로 약간 중복됩니다.

@phobic은 Bash 명령 을 다음과 같이 단순화 할 수 있다고 언급했습니다.

bash -c 'echo_var "{}"'

그 {}안에서 직접 이동합니다 . 그러나 그건 명령 주입에 취약 @Sasha에 의해 지적했다.

다음은 내장 형식을 사용하지 않아야 하는 예 입니다.

$ echo '$(date)' | xargs -I {} bash -c 'echo_var "{}"'
Sun Aug 18 11:56:45 CDT 2019

왜 안되는 또 다른 예 :

echo '\"; date\"' | xargs -I {} bash -c 'echo_var "{}"'

이것은 안전한 형식을 사용하여 출력 되는 것입니다 .

$ echo '$(date)' | xargs -I {} bash -c 'echo_var "$@"' _ {}
$(date)

이는 주입 을 피하기 위해 매개 변수화 된 SQL 쿼리 를 사용하는 것과 비교할 수 있습니다.

내가 사용하고 date명령 치환 또는 탈출 따옴표 여기 대신에 rm이 비파괴 이후 사샤의 의견에 사용되는 명령.

GNU Parallel을 사용하는 방법은 다음과 같습니다.

#!/bin/bash
echo_var(){
    echo $1
    return 0
}
export -f echo_var
seq -f "n%04g" 1 100 | parallel -P 10 echo_var {} 
exit 0

20170822 버전을 사용하는 경우이를 실행하기 만하면 export -f됩니다.

. `which env_parallel.bash`
seq -f "n%04g" 1 100 | env_parallel -P 10 echo_var {} 

이와 같은 것이 작동해야합니다.

function testing() { sleep $1 ; }
echo {1..10} | xargs -n 1 | xargs -I@ -P4 bash -c "$(declare -f testing) ; testing @ ; echo @ "

어쩌면 이것이 나쁜 습관 일 수도 있지만, .bashrc또는 다른 스크립트에서 함수를 정의하는 경우 파일 또는 적어도 함수 정의를 다음과 같이 설정하여 랩핑 할 수 있습니다 allexport.

set -o allexport

function funcy_town {
  echo 'this is a function'
}
function func_rock {
  echo 'this is a function, but different'
}
function cyber_func {
  echo 'this function does important things'
}
function the_man_from_funcle {
  echo 'not gonna lie'
}
function funcle_wiggly {
  echo 'at this point I\'m doing it for the funny names'
}
function extreme_function {
  echo 'goodbye'
}

set +o allexport