这是我的代码:
from pysparkling import H2OConf #commenting this line makes it work
import logging
logging.basicConfig(filename='my_log.log',level=logging.INFO)
logging.info('test')
除非我注释代码的第一行,否则我无法创建日志文件。如果我这样做,那么一切都会正常进行。我假设它是一个内部的导入H2OConf
,它弄乱了处理程序。有人经历过类似的事情吗?
我运行脚本
spark-submit --master yarn script.py
谢谢