CLog.php 14 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354
  1. <?php
  2. namespace loyalsoft;
  3. /**
  4. * 错误级别
  5. */
  6. class enum_LogLevel extends Enum {
  7. const All = 0;
  8. const Info = 1;
  9. const Warn = 2;
  10. const Err = 4;
  11. }
  12. /**
  13. * 日志工具类_高性能(High Performance)
  14. * @author gwang (mail@wanggangzero.cn)
  15. * @version <br/>
  16. * 3.0.2 2018年3月9日 完善稳定性, GetDir()方法添加了自动检查目录是否存在的逻辑. -gwang <br/>
  17. * 3.0.1 2018年1月9日 整理, online情况下paylog->mysql, errlog->redis, log和info信息仍然在文件(online默认关闭log和info的落地操作). -gwang <br/>
  18. * 2.0.1 2017年8月8日 将paylog和giftlog和output也保留了.以前向兼容就代码. -gwang <br/>
  19. * 2.0 2017年8月8日 整理, 将redis部分暂时去掉, 保留缓存模式, 在处理的最后集中flush到文件中. -gwang <br/>
  20. * 1.0 2016年7月1日 创建, 思路: 建立高性能的日志模块,消除写文件.暂时不包含支付日志. -gwang <br/>
  21. */
  22. class CLog {
  23. /**
  24. * 日志缓存
  25. * @var array
  26. */
  27. private static $Warn = array();
  28. private static $Info = array();
  29. private static $Err = array();
  30. private static $logLevel = enum_LogLevel::Err;
  31. /**
  32. * @var int 日志写入redis时保存的记录条数
  33. */
  34. const redis_log_trim_max = 5000;
  35. /**
  36. * @var int 日志写入redis时每次trim的记录条数
  37. */
  38. const redis_log_trim_once = 100;
  39. /**
  40. * @return string 日志目录
  41. */
  42. private static function GetDir() {
  43. // 线上版的时候会是linux系统, 单独指定目录, 测试的时候就放到代码旁边得了
  44. static $dir = null;
  45. if ($dir) {
  46. return $dir;
  47. }
  48. $dir = (SDK_GAME_ONLINE ? "/data/" : ROOTDIR . "/../" ) . "logs/" . PROJECTNAME . "/";
  49. if (is_dir($dir) || mkdir($dir, 0777, true)) {
  50. return $dir;
  51. }
  52. exit("can not access log directory!");
  53. }
  54. /**
  55. * 设置日志级别
  56. * @param int $level 参考常量enum_LogLevel :: 0 => info, 1 => log, 2 => err
  57. */
  58. public static function SetLogLevel($level) {
  59. if ($level >= enum_LogLevel::All && $level <= enum_LogLevel::Err) {
  60. self::$logLevel = $level;
  61. } else {
  62. // 无效值,忽视
  63. }
  64. }
  65. /**
  66. * 断言,
  67. * @param bool $condition 条件/条件表达式
  68. * @param string $errmsg 条件不成立时输出到日志中的信息, 日志级别err
  69. * @param string $okmsg 【可选】默认(null), 当条件成立时不记录任何消息, 除非特别指定了消息内容.日志级别info
  70. */
  71. public static function Assert($tag, $condition, $errmsg, $okmsg = null) {
  72. if (!$condition) {
  73. self::err($errmsg, $tag);
  74. } else if ($okmsg) {
  75. self::info($okmsg, $tag);
  76. }
  77. }
  78. /**
  79. * 记录日志
  80. * @param string $msg
  81. * @param string $tag 标签
  82. */
  83. public static function warn($msg, $tag = 'log') {
  84. if (self::$logLevel <= enum_LogLevel::Warn) {
  85. self::$Warn[] = self::makeLogMsg($msg, $tag);
  86. }
  87. }
  88. /**
  89. * @param string $msg
  90. * @param string $tag 标签
  91. */
  92. public static function info($msg, $tag = 'info') {
  93. if (self::$logLevel <= enum_LogLevel::Info) {
  94. self::$Info[] = self::makeLogMsg($msg, $tag);
  95. }
  96. }
  97. /**
  98. * 记录异常日志
  99. * @param string $msg
  100. * @param string $tag 标签
  101. */
  102. public static function err($msg, $tag = "err") {
  103. if (self::$logLevel <= enum_LogLevel::Err) {
  104. self::$Err[] = self::makeLogMsg($msg, $tag);
  105. }
  106. }
  107. /**
  108. * 将缓存中的数据写入存储设备并清除缓存
  109. */
  110. public static function flush() {
  111. // self::flush2File(enum_LogLevel::Info); # 普通信息写到本地文件
  112. // self::flush2File(enum_LogLevel::Warn);
  113. self::flush2MySQL(enum_LogLevel::Info);
  114. self::flush2MySQL(enum_LogLevel::Warn);
  115. if (SDK_GAME_ONLINE) {
  116. // self::flush2Redis(enum_LogLevel::Err); # 外网错误日志写入redis
  117. self::flush2MySQL(enum_LogLevel::Err);
  118. } else {
  119. // self::flush2File(enum_LogLevel::Err); # 内网错误日志写入本地文件
  120. self::flush2MySQL(enum_LogLevel::Err);
  121. }
  122. }
  123. /**
  124. * 将日志写入文件
  125. * @global type $zoneid
  126. * @param enum_LogLevel $type
  127. */
  128. private static function flush2File($type) {
  129. $typename = strval(new enum_LogLevel($type));
  130. $fileName = self::GetDir() . $typename . "-" . date('Ymd') . ".log"; # 日志文件名(按天分割)
  131. $fd = fopen($fileName, "a");
  132. if (false === $fd) { # 打开文件失败
  133. throw new \Exception("打开 $fileName 失败");
  134. }
  135. $arr = self::$$typename; # 取对应类型的数组
  136. if (count($arr) > 0) {
  137. foreach ($arr as $msg) {
  138. $n = fputs($fd, $msg . PHP_EOL);
  139. if (false === $n) { # 写入时失败
  140. throw new \Exception("写入 $fileName 时失败");
  141. }
  142. // todo: 其实写入日志也是有失败几率的, 当写入日志也失败的时候,
  143. // 抛出异常, 让nginx来记录下些东西, 但是如果是在errorhandler
  144. // 中写日志的时候出错呢......
  145. // -wg 2017年8月5日 08:56:29
  146. }
  147. self::$$typename = array(); # 清空数据
  148. }
  149. fclose($fd); # 关闭文件
  150. }
  151. /**
  152. * 将缓存中的数据写入存储设备(redis)并清除缓存
  153. * @type int/enum_LogLevel 日志类型
  154. */
  155. private static function flush2Redis($type) {
  156. $typename = strval(new enum_LogLevel($type));
  157. $key = "log-" . $typename;
  158. $arr = self::$$typename; # 取对应类型的数组
  159. if (count($arr) > 0) {
  160. redis()->lpush($key, $arr);
  161. if (redis()->llen($key) > self::redis_log_trim_max + self::redis_log_trim_once) {# 达到清理条件
  162. redis()->ltrim($key, 0, -self::redis_log_trim_once); # 缩减记录
  163. }
  164. self::$$typename = array(); # 清空数据
  165. }
  166. }
  167. /**
  168. * 将缓存中的数据写入存储设备(mysql)并清除缓存
  169. * @type int/enum_LogLevel 日志类型
  170. */
  171. private static function flush2MySQL($type) {
  172. $typename = strval(new enum_LogLevel($type));
  173. $key = "log-" . $typename;
  174. $arr = self::$$typename; # 取对应类型的数组
  175. if (count($arr) > 0) {
  176. // 创建表
  177. $sql = "create table if not exists `$key` (`row` INT(11) NOT NULL AUTO_INCREMENT COMMENT '自增行号', `msg` TEXT NULL COMMENT '错误消息内容', PRIMARY KEY (`row`)) COLLATE='utf8_general_ci' ENGINE=InnoDB;";
  178. daoInst()->exec($sql);
  179. // 插入数据
  180. $data = array();
  181. array_map(function($v) use(&$data) {
  182. $data[] = "(" . daoInst()->quote($v) . ")";
  183. }, $arr);
  184. $sql_insert = "insert into `$key` (`msg`) values " . implode(',', $data) . " ;";
  185. daoInst()->exec($sql_insert);
  186. // 检查表大小
  187. $n = daoInst()->select()->from("`$key`")->count(); # 查一下当前表大小
  188. $max = 150000; # 最多保留15万条记录
  189. $del_once = 10000; # 超过15万,清理一次,一次删除1万条
  190. if ($n > $max) {
  191. $sql = "delete from `$key` order by `row` limit $del_once ;"; # 一次清理一批
  192. daoInst()->exec($sql);
  193. }
  194. self::$$typename = array(); # 清空数据
  195. }
  196. }
  197. //
  198. // 避免异常导致缓存丢失, 付费模块的日志直接写入文件
  199. // <editor-fold defaultstate="collapsed" desc=" 付费相关日志, 无缓存 ">
  200. /**
  201. * 输出日志 到pay.log
  202. * @param mixed $msg 参数是字符串则直接输出,否则调用json_encode
  203. */
  204. public static function pay($msg) {
  205. if (SDK_GAME_ONLINE) {
  206. self::Paylog2Mysql($msg);
  207. } else {
  208. $fileName = self::GetDir() . "pay.log";
  209. self::Log2File($fileName, $msg);
  210. }
  211. }
  212. /**
  213. * 输出日志 到gift.log
  214. * @param mixed $msg 参数是字符串则直接输出,否则调用json_encode
  215. * @deprecated since version 0.1
  216. */
  217. public static function giftlog($msg) {
  218. $fileName = self::GetDir() . "gift.log";
  219. self::Log2File($fileName, $msg);
  220. }
  221. /**
  222. * 向文件写入日志
  223. * @global int $zoneid
  224. * @param string $fileName
  225. * @param string $msg
  226. */
  227. private static function Log2File($fileName, $msg) {
  228. $fd = fopen($fileName, "a");
  229. if ($fd === FALSE) { # 打开文件失败
  230. throw new \Exception('open file failed! ' . $fileName);
  231. }
  232. // todo: 文件写入也是有机会出错的, 此处出错应予监控,
  233. // 并抛出异常到nginx/phpfpm层,记录日志.
  234. // -wg 2017年8月5日 09:10:16
  235. $str = self::makeLogMsg($msg);
  236. fputs($fd, $str . PHP_EOL);
  237. fclose($fd); # 关闭文件
  238. }
  239. /**
  240. * 生成日志,格式: [x区][时间][文件][tag]: msg
  241. * @global \loyalsoft\type $zoneid
  242. * @param type $msg
  243. * @param type $tag
  244. * @return string
  245. */
  246. private static function makeLogMsg($msg, $tag = null) {
  247. global $zoneid;
  248. $array = debug_backtrace();
  249. while (isset($array[0]) && isset($array[0]['file']) && $array[0]['file'] == __FILE__) {
  250. array_shift($array);
  251. }
  252. $row = $array[0];
  253. $row = $array[0];
  254. $server_addr = isset($_SERVER['SERVER_ADDR']) ? $_SERVER['SERVER_ADDR'] : "-";
  255. $client_addr = isset($_SERVER['REMOTE_ADDR']) ? $_SERVER['REMOTE_ADDR'] : "-";
  256. return "[" . $server_addr . "][$zoneid 区][" . date('Y-m-d H:i:s') # # 主机地址、分区、时间
  257. . "][" . $client_addr . "][" # # 客户端地址
  258. . (isset($row['file']) ? CommUtil::str2UTF8(basename($row['file'])) : '-') # 所在文件名
  259. . ":" . (isset($row['line']) ? $row['line'] : "???")# # 所在行
  260. . "]" . (isset($tag) ? "[$tag]" : "") . "=> " . var_export($msg, true)# # 标签、内容
  261. . PHP_EOL;
  262. // . "req: " . JsonUtil::encode($req);
  263. }
  264. /**
  265. * 将pay日志写入mysql
  266. * @param type $msg
  267. */
  268. public static function Paylog2Mysql($msg) {
  269. $str = self::makeLogMsg($msg); # 统一日志格式字符串
  270. $t = "tab_paylog_" . date('Ym');
  271. $str = daoInst()->quote($str); # 字符串引号处理
  272. $sql = "create table if not exists $t like tpl_paylog_tab_ym;";
  273. daoInst()->exec($sql);
  274. $sql = " insert into $t (msg) values (" . $str . ");";
  275. $n = daoInst()->exec($sql);
  276. if ($n < 0) {
  277. self::err("写入数据库失败." . $sql);
  278. }
  279. }
  280. // </editor-fold>
  281. //
  282. // <editor-fold defaultstate="collapsed" desc=" 待实现">
  283. // /**
  284. // * 将redis中昨天的日志数据输出到磁盘存储介质比如MySQL中.
  285. // * 配合crontable 定时将redis中的日志转存到成本较低的MySQL中方便查阅记录.
  286. // * 而在MySQL中的数据则进行定期备份,比如一个月之后将上个月的数据转储为sql文件,然后从数据库中清除.
  287. // */
  288. // public static function dump() {
  289. // throw new \Exception('uncompleted');
  290. // $redis = gMem();
  291. // $tsday = TimeUtil::dtYesterday(); // 20160702
  292. // $db = CPayInit();
  293. // $sk = "game-run-log-" . $tsday;
  294. // set_time_limit(0); // 这里要取消超时限制
  295. // self::_insert2mysql($redis, $db, $sk . "-info");
  296. // self::_insert2mysql($redis, $db, $sk . "-log");
  297. // self::_insert2mysql($redis, $db, $sk . "-err");
  298. // $db->close();
  299. // }
  300. // /**
  301. // * 插入记录
  302. // * @param CRedisUtil $redis
  303. // * @param CDBUtil $db
  304. // * @param string $key
  305. // */
  306. // private static function _insert2mysql($redis, $db, $key) {
  307. // $len = 1000; # 一个批次插入1000条记录能达到相对较优的效率了. (100M内网/1000M本机测试,单条记录长度约为200个字节)
  308. // $arr = $redis->lrange($key, 0, $len - 1);
  309. // while (count($arr) > 0) {
  310. // $values = array();
  311. // $sql = 'insert into log201607 (type,ts,tag,msg) values ';
  312. // foreach ($arr as $s) {
  313. // $values[] = "(" . enum_LogLevel::Err . ", $s)";
  314. // }
  315. // $sql .= implode(',', $values);
  316. // $db->query($sql);
  317. // $redis->ltrim($key, $len, -1);
  318. // $arr = $redis->lrange($key, 0, $len - 1);
  319. // }
  320. // }
  321. // </editor-fold>
  322. //
  323. }
  324. if (!SDK_GAME_ONLINE) { # 除了现网
  325. CLog::SetLogLevel(enum_LogLevel::All); # 开启所有级别的日志输出
  326. }