Python日志开销

2023年2月24日 186次阅读

我正在使用
asyncio模块编写代码,其中包含大量信息/调试日志记录(logging.FileHandler).我担心在asyncio中大量使用登录会降低我的应用程序的性能,因为日志记录阻止了操作.

什么是最好的解决方案？没有找到有关日志记录开销的任何信息.

也许使用SocketHandler或MemoryHandler会有帮助吗？对于我正在使用statsd的指标(它也是阻塞操作,但必须非常快),但我更关注非阻塞日志记录.

代码示例：

@asyncio.coroutine
def creator_worker(self):
    while not self.q.empty():
        with (yield from self.semaphore):
            sample = yield from self.q.get()
            logging.debug('Got new sample, processing')
            # start processing

我知道

import os
os.environ['PYTHONASYNCIODEBUG'] = '1'
import asyncio

但这不是我想要的.

谢谢

最佳答案 记录文档提供了一个解决方案,记录QueueHandler,然后使用QueueListener处理另一个线程中的日志记录.

https://docs.python.org/3.6/howto/logging-cookbook.html#dealing-with-handlers-that-block

点赞