织云Metis时间序列异常检测全方位解析.pptx
《织云Metis时间序列异常检测全方位解析.pptx》由会员分享,可在线阅读,更多相关《织云Metis时间序列异常检测全方位解析.pptx(32页珍藏版)》请在咨信网上搜索。
1、织云Metis时间序列异常检测 全方位解析腾讯社交网络运营部Metis智能运维团队传统时序监控的问题与新思路检测算法原理与应用特征工程与打标工程样本库建设与管理Metis概述(智能运维应用实践)业务规模轻微的异常就会影响到大量的外网用户在线2.8亿月活8.05亿SNG服务器20w+社交类指标240w+传统监控与新思路形态各异准确率低维护成本高随着业务发展,传统监控呈现出的一些问题传统监控与新思路算法和机器学习的新思路是否可应用?传统时序监控的问题与新思路检测算法原理与应用特征工程与打标工程样本库建设与管理Metis概述(智能运维应用实践)常见的机器学习算法回归基于实例正则化贝叶斯聚类基于核关联
2、规则决策树深度学习从大量输入中总结出准确预测的规律(模型)数值型预测0/1型预测概率型预测等技术路线演进时间序列的统计算法基于正态分布的假设基于弱平稳性的假设基于趋势性,周期性分类问题(只用有监督算法)正负样本不均衡正负样本不全面负样本稀少,难以获取解决方案(无监督+有监督)使用统计判别和无监督算法过滤掉大量正样本人工标注正负样本有监督算法提升精准度技术框架l离线模块数据存储统计算法&无监督算法输出疑似异常样本库(人工标注)特征工程(离线计算)有监督算法(离线计算)数据提取统计算法&无监督算法输出疑似异常加载有监督模型特征工程(实时计算)有监督算法(输出异常)l在线模块lABTest模块人工审
3、核Atest(实验模型A)Btest(实验模型B)第一层:统计判别算法数据提取以当前时刻为标准七天前后三小时+昨天前后三小时+今天前三小时Grubbs3sigma原理控制图移动平均算法指数移动平均算法l3sigma算法与控制图算法的优缺点第一层:无监督算法l无监督学习算法的优缺点数据提取以当前时刻为标准七天前后三小时+昨天前后三小时+今天前三小时孤立森林可以从多维特征中寻找异常点SVM使用超平面的思想来进行异常/正常的区分RNN使用神经网络的误差来进行异常判断第一层:无监督算法Isolation Forest属于无监督算法集成学习的思想适用于连续数据的异常检测通过多颗 iTree 形成森林来判
4、断是否异常第一层:无监督算法One Class SVM属于无监督算法使用了超平面的思想适用于连续数据的异常检测适用于对样本进行一定比例的筛选寻找高维平面区分正常点与异常点第一层:无监督算法Replicator Neural Network属于无监督算法需要构造必要的特征使用了神经网络的思想适用于连续数据的异常检测寻找神经网络的误差来区分正常点与异常点第二层:有监督算法有监督算法Linear Regression/Logistic RegressionDecision Tree/Nave BayesRandom Forest/GBDT/xgboostl有监督算法能解决的问题传统时序监控的问题与新
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 织云 Metis 时间 序列 异常 检测 全方位 解析
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【丰****】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【丰****】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。