1、参与 Appium 文档翻译计划
https://www.kancloud.cn/testerhome/appium_docs_cn
https://github.com/testerhome/appium/commit/8e4810fe335284e3df97ec855b663431232915aa
2、荣获 2 项政府荣誉
3、成功入选省技术委员会委员

  • 在 Python 中,如果你在多进程环境中使用 logging 模块并尝试将日志写入同一个文件,可能会遇到竞争条件和其他并发问题,因为默认的 logging 配置并不是为并发写操作设计的。

    为了解决这个问题,你可以采取以下几种策略:
    为每个进程使用单独的日志文件:
    这是最简单的方法。你可以在创建每个进程时,给它们一个唯一的日志文件路径。
    使用队列和单个日志处理进程:
    你可以设置一个单独的进程来处理日志记录,其他所有进程都将日志消息发送到该进程的队列中。这个处理进程可以从队列中读取消息,并将它们写入日志文件。
    使用线程安全的日志处理:
    虽然 logging 模块本身不是线程安全的,但你可以使用线程安全的队列或其他同步机制来确保对日志文件的访问是顺序的。但是,在多进程环境中,这通常比使用单独的日志文件更复杂且效率更低。
    使用日志轮转和延迟打开:
    如果日志文件不是实时需要的,你可以考虑使用日志轮转,并在每个进程结束时才将日志写入文件。这可以通过延迟打开文件句柄直到需要写入日志来实现。
    使用第三方库:
    有些第三方库,如 loguru,提供了更高级的多进程日志记录功能。

    下面是一个简单的示例,展示如何为每个进程使用单独的日志文件:

    import logging  
    import multiprocessing  
    
    def worker_with_logging(process_id, log_file):  
        # 配置每个进程的日志记录器  
        logging.basicConfig(filename=log_file, level=logging.INFO,  
                            format='%(asctime)s process %d: %(message)s' % process_id)  
    
        # 记录一些日志  
        logging.info('Starting work')  
        # ... 执行一些工作 ...  
        logging.info('Finishing work')  
    
    if __name__ == '__main__':  
        processes = []  
        for i in range(5):  # 假设我们创建5个进程  
            log_file = f'log_{i}.txt'  
            p = multiprocessing.Process(target=worker_with_logging, args=(i, log_file))  
            p.start()  
            processes.append(p)  
    
        # 等待所有进程完成  
        for p in processes:  
            p.join()
    

    在这个示例中,每个进程都有自己的日志文件,因此不存在并发写入同一个文件的问题。

  • 在 Python 中,由于logging模块在多进程环境中存在一些限制,直接在多进程中使用logging模块写入同一个文件可能会导致日志错乱或死锁问题。为了解决这个问题,可以采用以下几种策略:

    1. 使用QueueHandlerQueueListener:创建一个日志队列,让主进程负责收集日志并写入文件。这种方式可以避免多进程直接写入文件,从而解决日志错乱和死锁的问题。

    2. 使用进程安全的日志库:例如concurrent-log-handler模块,它提供了线程和进程安全的日志处理方式。通过继承BaseRotatingHandler并实现文件锁机制,可以确保日志写入的准确性,尽管这可能会牺牲一些效率。

    3. 避免在多进程中使用文件锁:在多进程环境中,文件锁可能会导致死锁。可以通过设计日志系统来避免使用文件锁,例如,让一个单独的进程或线程负责日志的收集和写入。

    4. 使用独立的日志文件:为每个进程分配一个独立的日志文件,这样可以避免多进程写入同一个文件时的冲突。

    5. 使用网络日志:通过SocketHandler,可以让不同的进程通过网络发送日志消息到一个中心日志服务器,由服务器来处理日志存储。

    6. 使用第三方日志管理工具:例如使用SentryLogstash等工具,它们可以更好地处理多进程和多线程环境下的日志收集和存储。

    7. multiprocessingtarget函数之外定义 logger:确保在创建进程之前已经配置好 logger,这样可以减少多进程中由于 logger 初始化导致的潜在问题。

    8. 使用multiprocessing-logging:这是一个专门为多进程日志设计的库,可以简化多进程日志的处理。

    综上所述,要解决logging模块在多进程测试时写入文件报错的问题,需要根据具体的应用场景选择合适的日志处理策略。在设计日志系统时,应该考虑到多进程环境下的特殊性,采用合适的方法来确保日志的正确性和完整性。

  • 小程序可以用 airtest,也可以用 minium 框架
    https://airtest.doc.io.netease.com/
    https://minitest.weixin.qq.com/#/

  • 苏州跌惨了,自己的房子都跌了百十万以上

  • 支持

  • 祝贺

  • 社区可以搞搞自己的定制类的文创产品啥的出来卖卖,既丰富了积分兑换的产品,也可以满足会员的个人文化需求, 并且可以增加社区的营收

  • 微信群本来就不合适讨论技术

  • 好的软件测试人员简历是什么样子的?
    https://www.zhihu.com/question/22709265

  • 有,拿了 2 个发明授权,对跳槽涨薪无用,人家也不看。

1、参与 Appium 文档翻译计划
https://www.kancloud.cn/testerhome/appium_docs_cn
https://github.com/testerhome/appium/commit/8e4810fe335284e3df97ec855b663431232915aa
2、荣获 2 项政府荣誉
3、成功入选省技术委员会委员