Python 로깅-가져온 모듈에서 로깅 비활성화

Python 로깅 모듈을 사용하고 있으며 가져 오는 타사 모듈에서 인쇄 한 로그 메시지를 비활성화하고 싶습니다. 예를 들어 다음과 같은 것을 사용하고 있습니다.

logger = logging.getLogger()
logger.setLevel(level=logging.DEBUG)
fh = logging.StreamHandler()
fh_formatter = logging.Formatter('%(asctime)s %(levelname)s %(lineno)d:%(filename)s(%(process)d) - %(message)s')
fh.setFormatter(fh_formatter)
logger.addHandler(fh)

이렇게하면 logger.debug ( "my message!")를 수행 할 때 디버그 메시지가 출력되지만 내가 가져온 모듈 (예 : 요청 및 기타 여러 가지)의 디버그 메시지도 출력합니다.

관심있는 모듈의 로그 메시지 만보고 싶습니다. 로깅 모듈이이 작업을 수행하도록 할 수 있습니까?

이상적으로는 로거에게 "ModuleX, ModuleY"의 메시지를 인쇄하고 다른 모든 메시지는 무시하도록 지시하고 싶습니다.

다음을 살펴 보았지만 가져온 함수를 호출 할 때마다 로깅을 비활성화 / 활성화 할 필요가 없습니다. 로깅-가져온 모듈 로그를 무시하는 방법?

문제는 getLogger인수없이 호출 하면 루트 로거가 반환 되므로 레벨을 설정할 때 logging.DEBUG해당 로거를 사용하는 다른 모듈의 레벨도 설정됩니다.

루트 로거를 사용 하지 않음 으로써이 문제를 해결할 수 있습니다 . 이렇게하려면 모듈 이름과 같이 이름을 인수로 전달하면됩니다.

logger = logging.getLogger('my_module_name')
# as before

이렇게하면 새 로거가 생성되므로 다른 모듈의 로깅 수준이 실수로 변경되지 않습니다.

후자는 루트 로거 의 메서드 를 호출하는 편리한 함수이기 때문에 분명히 logger.debug대신 사용해야 합니다 .logging.debugdebug

이것은 고급 로깅 ​​자습서에 언급되어 있습니다. 또한 간단한 방법으로 어떤 모듈이 로그 메시지를 트리거했는지 알 수 있습니다.

파이썬 logging패키지 를 사용하려는 경우이를 사용하는 모든 모듈에서 로거를 정의하는 것이 일반적인 규칙입니다.

logger = logging.getLogger(__name__)

많은 인기있는 파이썬 패키지가이를 수행합니다 requests. 패키지가이 규칙을 사용하는 경우 로거 이름이 패키지와 동일한 이름 (또는 해당 로거의 하위)이되기 때문에 로깅을 활성화 / 비활성화하기가 쉽습니다. 다른 로거와 동일한 파일에 기록 할 수도 있습니다.

logger = logging.getLogger(__name__)
logger.setLevel(logging.DEBUG)

requests_logger = logging.getLogger('requests')
requests_logger.setLevel(logging.DEBUG)

handler = logging.StreamHandler()
handler.setLevel(logging.DEBUG)
logger.addHandler(handler)
requests_logger.addHandler(handler)

이것이 게시하기에 적절한 지 확실하지 않지만 오랫동안 갇혀 있었고 다른 곳에서는 찾지 못했기 때문에 동일한 문제를 가진 사람을 돕고 싶었습니다!

로깅 고급 자습서 및 문제 해결 에서 매우 간단한 설명서를 따랐음에도 불구하고 matplotlib에서 디버그 로그를 얻었습니다 . main()한 파일 에서 로거를 시작 하고 다른 파일에서 플롯을 생성하는 함수를 가져 왔습니다 (matplotlib를 가져온 곳).

나를 위해 일한 것은 내 주 파일의 다른 모듈에서와 마찬가지로 matplotlib 를 가져 오기 전에 수준을 설정하는 것이 었습니다. 이것은 나에게 반 직관적 인 것처럼 보였으므로 아직 가져 오지 않은 로거에 대한 구성을 설정할 수있는 방법에 대한 통찰력이있는 사람이 있다면 이것이 어떻게 작동하는지 궁금 할 것입니다. 감사!

내 주 파일에서 :

import logging
import requests
logger = logging.getLogger(__name__)
logger.setLevel(logging.DEBUG)
logging.getLogger('requests').setLevel(logging.DEBUG)

def main():
  ...

내 plot.py파일에서 :

import logging
logging.getLogger('matplotlib').setLevel(logging.WARNING)
import matplotlib.pyplot as plt

def generatePlot():
  ...

@Bakuriu는 기능을 아주 우아하게 설명합니다. 반대로,이 getLogger()방법을 사용하여 원하지 않는 로거를 검색하고 재구성 / 비활성화 할 수 있습니다 .

또한 이전에 정의 된 로거 (즉, 가져온 모듈에서)를 비활성화 logging.fileConfig()하는 매개 변수를 허용하는 메서드 를 추가하고 싶었습니다 disable_existing_loggers.

이렇게하면 루트 로거를 계속 사용하는 동안 (외부 파일을로드 할 필요없이) 가져온 모듈에 의해 생성 된 것과 같은 기존의 모든 로거가 비활성화됩니다.

logging.config.dictConfig({
    'version': 1,
    'disable_existing_loggers': True,
})

먼저 기록하고 싶지 않은 모든 모듈을 가져와야합니다! 그렇지 않으면 "기존 로거"로 간주되지 않습니다. 그런 다음 해당 모듈의 모든 로거를 비활성화합니다. 이로 인해 중요한 오류를 놓칠 수도 있습니다!

구성에 관련 옵션을 사용하는 자세한 예제는 https://gist.github.com/st4lk/6287746을 참조 하십시오 . 여기 에는 coloredlog라이브러리 구성에 YAML을 사용하는 (부분적으로 작동하는) 예제가 있습니다.

다음과 같이 사용할 수 있습니다.

logging.getLogger("imported_module").setLevel(logging.WARNING)
logging.getLogger("my_own_logger_name").setLevel(logging.DEBUG)

이렇게하면 내 모듈의 로그 수준이 DEBUG로 설정되고 가져온 모듈이 동일한 수준을 사용하지 못합니다.

참고 : "imported_module"교체 할 수 있습니다 imported_module.__name__(따옴표없이)을 "my_own_logger_name"대체 할 수 __name__그건 당신이 그것을 할 선호하는 방법입니다 경우.

나는 같은 문제가 있었다. 다른 모든 py 파일에서 가져 오는 logging_config.py 파일이 있습니다. logging_config.py 파일에서 루트 로거 로깅 수준을 ERROR로 설정했습니다 (기본적으로 경고).

logging.basicConfig(
    handlers=[
        RotatingFileHandler('logs.log',maxBytes=1000, backupCount=2),
        logging.StreamHandler(), #print to console
    ],
    level=logging.ERROR
)

다른 모듈에서는 logging_config.py를 가져오고 새 로거를 선언하고 디버그 수준을 설정합니다.

log = logging.getLogger(__name__)
log.setLevel(logging.DEBUG)

이렇게하면 내 py 파일에 로그인하는 모든 것이 기록되지만 urllib, request, boto3 등과 같은 가져온 모듈에 의해 디버그 및 정보 수준에서 기록 된 내용은 기록되지 않습니다. 가져 오기 모듈에 오류가 있으면 루트 로거 수준을 ERROR로 설정했기 때문에 로깅됩니다.

고려해야 할 또 다른 사항은 Logger 클래스 의 propagate 속성입니다.

예를 들어, SOAP 호출을 처리하기위한 py-suds 라이브러리, 심지어 ERROR

logging.getLogger('suds.client').setLevel(logging.ERROR)
logging.getLogger('suds.transport').setLevel(logging.ERROR)
logging.getLogger('suds.xsdschema').setLevel(logging.ERROR)
logging.getLogger('suds.wsdl').setLevel(logging.ERROR)

sxbasics.py라는 모듈에 대한 로그 로그 생성 g 엄청난 양의 로그

로그 전파는 기본적으로 True이고 False로 설정되어 있기 때문에 514MB의 로그를 복구했습니다.

import logging
logging.getLogger("suds").propagate = False
logging.getLogger('suds.client').setLevel(logging.ERROR)
logging.getLogger('suds.transport').setLevel(logging.ERROR)
logging.getLogger('suds.xsdschema').setLevel(logging.ERROR)
logging.getLogger('suds.wsdl').setLevel(logging.ERROR)