Logger.py 6.5 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171
  1. #!/usr/bin/env python3
  2. # coding:utf-8
  3. """
  4. logging配置
  5. """
  6. import os
  7. import time
  8. import logging.config
  9. import sys
  10. from Apietl.constant.ConfConstant import ConfConstant
  11. class Logger:
  12. def GetLocalTime(self):
  13. # 获取当前时间
  14. time_now = int(time.time())
  15. # 转换成localtime
  16. time_local = time.localtime(time_now)
  17. # 转换成新的时间格式(2016-05-09 18:59:20)
  18. dt = time.strftime("%Y%m%d", time_local)
  19. return dt
  20. def etl_logger(self, media, dt):
  21. # 定义三种日志输出格式 开始
  22. standard_format = '[%(asctime)s][%(threadName)s:%(thread)d][task_id:%(name)s][%(filename)s:%(lineno)d]' \
  23. '[%(levelname)s][%(message)s]' # 其中name为getlogger指定的名字
  24. simple_format = '[%(levelname)s][%(asctime)s][%(filename)s:%(lineno)d]%(message)s'
  25. id_simple_format = '[%(levelname)s][%(asctime)s] %(message)s'
  26. # 定义日志输出格式 结束
  27. argv0_list = sys.argv[0].split("/")
  28. script_name = argv0_list[len(argv0_list) - 1]
  29. scname = script_name[0:-3] # 获取执行程序文件名
  30. # home = os.getenv('ARK_HOME')
  31. # log_home = os.path.join(home, 'logs')
  32. log_home = ConfConstant.Log_home
  33. logfile_dir = os.path.dirname('{}/{}/{}'.format(log_home, self.GetLocalTime(), media))
  34. logfile_name = '{0}_{1}.log'.format(scname, dt) # log文件名
  35. # 如果不存在定义的日志目录就创建一个
  36. if not os.path.isdir(logfile_dir):
  37. os.makedirs(logfile_dir)
  38. # log文件的全路径
  39. logfile_path = os.path.join(logfile_dir, logfile_name)
  40. # log配置字典
  41. LOGGING_DIC = {
  42. 'version': 1,
  43. 'disable_existing_loggers': False,
  44. 'formatters': {
  45. 'standard': {
  46. 'format': standard_format
  47. },
  48. 'simple': {
  49. 'format': simple_format
  50. },
  51. 'id_simple': {
  52. 'format': id_simple_format
  53. },
  54. },
  55. 'filters': {},
  56. 'handlers': {
  57. # 打印到终端的日志
  58. 'console': {
  59. 'level': 'INFO',
  60. 'class': 'logging.StreamHandler', # 打印到屏幕
  61. 'formatter': 'id_simple'
  62. },
  63. # 打印到文件的日志,收集info及以上的日志
  64. 'default': {
  65. 'level': 'INFO',
  66. 'class': 'logging.handlers.RotatingFileHandler', # 保存到文件
  67. 'formatter': 'id_simple',
  68. 'filename': logfile_path, # 日志文件
  69. # 'maxBytes': 1024*1024*5, # 日志大小 5M
  70. 'backupCount': 5,
  71. 'encoding': 'utf-8', # 日志文件的编码,再也不用担心中文log乱码了
  72. },
  73. },
  74. 'loggers': {
  75. # logging.getLogger(__name__)拿到的logger配置
  76. '': {
  77. 'handlers': ['default', 'console'], # 这里把上面定义的两个handler都加上,即log数据既写入文件又打印到屏幕
  78. 'level': 'INFO',
  79. 'propagate': True, # 向上(更高level的logger)传递
  80. },
  81. },
  82. }
  83. logging.config.dictConfig(LOGGING_DIC) # 导入上面定义的logging配置
  84. return logging.getLogger(__name__) # 生成一个log实例
  85. def inilg(self, uname):
  86. # 定义三种日志输出格式 开始
  87. dt = self.GetLocalTime()
  88. standard_format = '[%(asctime)s][%(threadName)s:%(thread)d][task_id:%(name)s][%(filename)s:%(lineno)d]' \
  89. '[%(levelname)s][%(message)s]' # 其中name为getlogger指定的名字
  90. simple_format = '[%(levelname)s][%(asctime)s][%(filename)s:%(lineno)d]%(message)s'
  91. id_simple_format = '[%(levelname)s][%(asctime)s] %(message)s'
  92. # 定义日志输出格式 结束
  93. # '/data/api/logs/gdt/mly/log'
  94. # logfile_dir = os.path.dirname('{0}/{1}'.format(os.path.abspath(__file__), 'logs')) # log文件的目录
  95. logfile_dir = Constant.Log_home + "/hload" # log文件的目录
  96. logfile_name = '{}{}.log'.format(uname, dt) # log文件名
  97. # 如果不存在定义的日志目录就创建一个
  98. if not os.path.isdir(logfile_dir):
  99. os.mkdir(logfile_dir)
  100. # log文件的全路径
  101. logfile_path = os.path.join(logfile_dir, logfile_name)
  102. # log配置字典
  103. LOGGING_DIC = {
  104. 'version': 1,
  105. 'disable_existing_loggers': False,
  106. 'formatters': {
  107. 'standard': {
  108. 'format': standard_format
  109. },
  110. 'simple': {
  111. 'format': simple_format
  112. },
  113. },
  114. 'filters': {},
  115. 'handlers': {
  116. # 打印到终端的日志
  117. 'console': {
  118. 'level': 'DEBUG',
  119. 'class': 'logging.StreamHandler', # 打印到屏幕
  120. 'formatter': 'simple'
  121. },
  122. # 打印到文件的日志,收集info及以上的日志
  123. 'default': {
  124. 'level': 'INFO',
  125. 'class': 'logging.handlers.RotatingFileHandler', # 保存到文件
  126. 'formatter': 'standard',
  127. 'filename': logfile_path, # 日志文件
  128. # 'maxBytes': 1024*1024*5, # 日志大小 5M
  129. 'backupCount': 5,
  130. 'encoding': 'utf-8', # 日志文件的编码,再也不用担心中文log乱码了
  131. },
  132. },
  133. 'loggers': {
  134. # logging.getLogger(__name__)拿到的logger配置
  135. '': {
  136. 'handlers': ['default', 'console'], # 这里把上面定义的两个handler都加上,即log数据既写入文件又打印到屏幕
  137. 'level': 'DEBUG',
  138. 'propagate': True, # 向上(更高level的logger)传递
  139. },
  140. },
  141. }
  142. logging.config.dictConfig(LOGGING_DIC) # 导入上面定义的logging配置
  143. logger = logging.getLogger(__name__) # 生成一个log实例
  144. try:
  145. logger.debug('ok') # 记录该文件的运行状态
  146. pass
  147. except Exception as e:
  148. logger.error(e)