2020年全球互联网运维大会 华泰证券智能运维体课件.pptx
华泰证券智能运维体系的探索与实践,目录,券商运维的痛点,1,运维体系的介绍,2,层次化监控的建设,3,智能运维的案例,4,强周期性，强实时性高并发，高可用业务系统多，架构多样化资源规模不断变大稳定要求高，监管要求严,券商运维特点,运维的发展阶段,手工运维-原始方法-纯手工操作完成-低效、重复,脚本运维-重复、高频操作通 过脚本、小工具-系统间差异明显,平台运维-统一监控、自动化 运维平台-运维效率提升-人工分析和决策,智能运维-汇集海量运维数据AI算法分析决策-运维经验反馈大幅提升运维效率缩 短时间，提高准确性,目录,券商运维的痛点,1,运维体系的介绍,2,层次化监控的建设,3,智能运维的案例,4,运维的现状与挑战,统一监控平台,自动化系统,ITOM流程 管理系统,+,+,推动运维管理向运维 分析的转型,成立开发团队，打造体系 化的运维系统,建立流程驱动的IT资源 管理体系,统一自动化运维平台,打造层次化、精细化的监 控体系,成立IT技术支持团队， 打造技术支持体系,1,2,3,4,5,6,运维体系的转型,智能化的运维工作台,目录,券商运维的痛点,1,运维体系的介绍,2,层次化监控的建设,3,智能运维的案例,4,层次化划分精细化指标,关联依赖关系,网络拓朴应用拓朴,应用-服务器关系服务器-网络关系,分层分级的监控,业务逻辑,应用程序,中间件和数据库,服务器及操作系统,网络及网络设备,层次化监控体系,统一监控平台：监控数据门户,业务监控大屏,告警处理,日志搜索,业务全景监控,性能管理,容量管理,故障处理,一线运维人员,二线运维人员,运维数据中心,业务系统,中间件,计算资源,网络环境,运维对象,灵活的数据分析仪表盘,统一告警处理平台,统一监控平台,业务日志,运行日志,系统日志,网络日志,数据源,日志接入 集群,Kafka,Storm,ES,搜索与分析,日志告警,南京主机房,ES,异地灾备,同城灾备,ES,秒级搜索日志告警运营分析故障定位,系统核心功能,日志分析系统：故障排查与运营分析,性能监控指标抽取集中管理数据核对,60+,Storm,Logstash,3000+,日志分析的规模,1TB+每天,3000+采集节点60+的ES存储节点每日采集1TB+日志秒级查询，秒级告警,20+,10+,10+,交易流水查询小时秒级,实时运营分析T+1分钟,业务层监控不足丰富,故障快速定位量化、可视化,日志分析的价值,3,从业务视角，全局运营信息系统,部门级应用全景视图,全系统整体运行状态及故障发现,大屏模式,大屏数量,涉及指标数量,涉及系统,监控可视化大屏,10+,1000+,50+,全网覆盖分层Ping测自动配置多地部署智能告警,网络质量感知系统,IDC线路故障,单设备故障,网络质量感知,目录,券商运维的痛点,1,运维体系的介绍,2,层次化监控的建设,3,智能运维的案例,4,强周期性业务明显不同业务指标有差异每日业务存在差异 发行新股、新债 夜市委托,日志异常检测背景,业务特点,数据采集,时序数据库,ES/日志,采集规则,模型参数,模型配置,监控模型,模型调节器,异常告警,自动调节 手工调节,日期标签,日志异常检测框架,简单阈值模型周期性检测模型请求有无模型新标签模型-,日志异常检测的价值,检测模型,某请求负载变大单用户大量请求单节点硬件异常下线业务检测,异常检测的价值,告警准确率、召回率的提升,日志异常检测的不足,04,03,02,不同的场景使用不同的检测算法,不是所有的时序都需要“智能”检测,解决异常检测的“普适性”问题,自动化,体系化,工作台,智能化,未来的建设方向,日志分析系统统一监控平台 网络质量感知日志数据异常检测,运维数据中心智能算法库和计算平台 业务全景监控资源效能分析与画像 自动化服务平台,容量预测与管理智能故障预测 移动化运维 无人值守,建设路线规划,2018年,2019年,2020年,谢谢,
