曾经有个web服务器日志自动解析工具摆在我面前，我没有珍惜。等我失去的时候我才追悔莫及，人世间最痛苦的事莫过于此。   事情就是这样发生的—— 当前web服务器的多样化使得访问日志的数据清洗变得越来越复杂，企业需要投入专业的数据清洗人员编写数据清洗规则（解析规则或者解析正则），或者需要关心web服务器访问日志的生成规则。 手写web服务数据解析规则存在以下3个问题： 1、需

博士学位，先后在美国芝加哥大学、纽约皇后学院任教，回国后担任袋鼠云高级算法专家，负责公司众多大数据算法项目的落地实施，如新华书店、轻松筹等等，对于数据挖掘、机器学习等方面有非常深刻的理解和应用。 什么是新零售？ 简单的说新零售是线上，线下与物流的打通。 谈到新零售，就不得不提生活中越来越多的新零售体验店：比如盒马鲜生，天猫小店等等。大家谈到这些店铺的时候，都会想到“3公里30分

作者：苏坡 袋鼠云云服务部-DBA团队 数据库工程师   前两日与一个客户交流，客户提出了一些对mysql隔离级别以及锁的疑问，然后问到了出现锁等待现象的排查思路。这不禁让我回想起,long long ago，做过的一个诊断案例。当年我还不是一枚老司机，折腾了两三天才完全搞定，现在回想还颇有些借鉴价值，故，分享之~   1 问题描述 数据库实例：主库XXXX

作者：宋丹琪（花名：三思）袋鼠云云服务部DBA团队 数据库工程师 时常会有开发的同学突然紧张兮兮地找我， 然后丢给我一个代码层面的 CannotAcquireLockException的报错， 一脸无辜地问我是不是自己搞出了一个死锁。 好像大家看到LOCK的字眼 总会第一时间想到死锁而忽略了锁， 难道我们锁没有面子的嘛， 我们锁的大家族可足足有七种呢？ 那

作者：大鹏，袋鼠云日志团队后端开发工程师   传统监控范围小，智能监控效率高，你说到底怎么用？大鹏给你来支招~ 传统监控是通过对监控项设置一个固定值（阈值），当监控项指标超过这个阈值时就通知人们关注这个指标项。传统监控一般适用于一定范围波动的业务指标： 比如磁盘的使用率，CPU的使用率等，当指标超过一定值时就意味着系统可能出现故障，但是遇到波动范围比较大的场景时；比如某银

作者：良辰 袋鼠云日志团队 后端开发工程师   我放下了手中的键盘，陷入沉思， 作为一个优秀的程序猿最重要的就是 气~势~ 泰山崩于前的镇~定~   我用最快的速度扫描了一遍现行的 filebeat、fluentd、flume、 scribe等解决方案， 发现，没有机会， 难道就这样放弃了吗？   不，没有什么可以难倒我良辰！   我从

胡丰——袋鼠云高级算法专家 袋鼠云人工智能实验室负责人。十年图像处理、模式识别、机器视觉等方面的研发工作，主要研究领域为：智能交通、工业视觉分析、OCR、视频智能质量诊断、智能球机跟踪、人脸等方向，发表第一作者发明专利十余篇、国际发明专利一篇。 我国工业互联网已经形成“三条途径”：一是打造智能工厂，提高企业内部生产效率，通过互联网技术以及一些相关的机器视觉、图象算法、模式识别的方

曾经有个web服务器日志自动解析工具摆在我面前，我没有珍惜。等我失去的时候我才追悔莫及，人世间最痛苦的事莫过于此。 事情就是这样发生的—— 当前web服务器的多样化使得访问日志的数据清洗变得越来越复杂，企业需要投入专业的数据清洗人员编写数据清洗规则(解析规则或者解析正则)，或者需要关心web服务器访问日志的生成规则。 手写web服务数据解析规则存在以下3个问题： 1、需要投入专业技术人才完成