«multiprocessing» 태그된 질문

당황스럽게 병렬 문제 를 해결하기 위해 다중 처리 를 어떻게 사용 합니까? 당황스러운 병렬 문제는 일반적으로 세 가지 기본 부분으로 구성됩니다. 파일, 데이터베이스, tcp 연결 등에서 입력 데이터를 읽습니다 . 각 계산이 다른 계산과 독립적 인 입력 데이터에 대해 계산을 실행 합니다. 계산 결과를 작성 합니다 (파일, 데이터베이스, tcp 연결 …

82 python  concurrency  multiprocessing  embarrassingly-parallel 

각 줄을 처리하고 (일부 작업 수행) 데이터베이스에 저장하려는 하나의 큰 텍스트 파일이 있습니다. 하나의 간단한 프로그램이 너무 오래 걸리기 때문에 여러 프로세스 또는 스레드를 통해 수행되기를 바랍니다. 각 스레드 / 프로세스는 해당 단일 파일에서 다른 데이터 (다른 줄)를 읽고 데이터 조각 (줄)에 대해 몇 가지 작업을 수행하고 데이터베이스에 넣어 결국 …

82 python  multithreading  multiprocessing 

CPU 집약적 인 셀러리 작업이 있습니다. 이 작업을 더 빠르게 수행하기 위해 많은 EC2 인스턴스에서 모든 처리 능력 (코어)을 사용하고 싶습니다 (다중 처리가 포함 된 셀러리 병렬 분산 작업- 제 생각에는 ) . 용어, 스레딩 , 멀티 프로세싱 , 분산 컴퓨팅 , 분산 병렬 처리는 내가 더 잘 이해하기 위해 …

80 python  django  multithreading  multiprocessing  celery