Scrapy下导入airflow模块引起的日志故障分析
在Scrapy项目中导入airflow模块后,日志输出出现异常,主要表现为重复记录和不同的日志级别。分析发现,airflow的日志配置与Scrapy的根日志记录器配置冲突,导致日志处理流程受到影响。最终,重复输出的原因是两个项目级别的日志配置混合在一起,影响了日志的处理效率和输出格式。
在Scrapy项目中导入airflow模块后,日志输出出现异常,主要表现为重复记录和不同的日志级别。分析发现,airflow的日志配置与Scrapy的根日志记录器配置冲突,导致日志处理流程受到影响。最终,重复输出的原因是两个项目级别的日志配置混合在一起,影响了日志的处理效率和输出格式。