信息无障碍通道
您的位置:首页>>互联网

航空业海量日志的智能化分析实战

发布时间:2020-07-16  来源:互联网    背景: 无障碍通道

  对于当前航空业面临的海量实时业务数据监测与分析挑战,云智慧推出了一种基于业务系统日志数据,使用实时流式数据采集、大数据处理和人工智能技术实现海量日志数据智能化分析的解决方案,帮助IT运维人员实时、动态发现业务及IT系统存在的故障和异常,快速定位问题根源,保障航司业务持续、稳定和高效运行。

  挑战与需求

  随着航空及上下游服务产业链的快速发展,系统多、架构复杂、新旧业务系统长期共存,持续产生的海量日志数据缺乏有效的处理手段,对IT运维和运营带来极大的风险与挑战。

  以民航为例,旅客选择飞机出行需要经历订票、值机、登机等一系列流程,每种业务处理都要跨越多个平台的应用系统,每个系统都会实时输出日志数据记录当前应用运行情况,上述流程中任何一个应用的故障或者性能问题都会影响乘客出行。

  如何实时了解业务的整体运行状态,如何基于海量、实时的应用日志分析快速确定业务运行异常及潜在风险,如何根据业务量变化动态确定业务异常标准,如何针对当前业务中的异常情况及时预警,如何实现日志数据与其他运维监控数据的融合分析和查询,快速、准确定位业务及系统的故障,这都是日志智能分析平台需要解决的难题。

  云智慧日志智能分析解决方案及平台架构

  云智慧海量日志智能分析解决方案包括系统日志数据的实时采集、传输、集群化的消息队列、预处理组件及实时流式大数据处理,完成日志数据的解析、转换、脱敏、业务逻辑处理后,以结构化数据保存在分布式存储系统中,然后调用算法集之中的一种或多种算法组合进行多场景的智能分析、告警及可视化展示,同时提供数据API满足其它数据深入挖掘和探索需求。

  海量日志智能化分析平台架构如下图所示:

  方案特色和优势

  云智慧日志智能化分析平台解决方案为航空业务运行的连续性、用户体验的提升和业务的高效运维提供了可靠的技术支撑,此方案具有如下优势:

  1、丰富的日志数据实时采集

  • 支持自有高性能采集器,兼容主流开源数据采集器、灵活水平扩展的数据接入接口,快速接入流式数据;

  • 超高的吞吐量和极小的响应时间,数据接入即可秒级查询;

  2、高性能、动态扩展数据处理平台:内置数十种处理组件,支持可视化处理pipeline及单步处理结果验证、处理结果采用列式存储、线性存储扩展。平台具备实时流式数据处理能力,满足航空业海量日志数据实时处理和智能分析的严格要求:

  • 支持根据数据量进行水平伸缩,数据处理能力:40T/天,EPS:130万/秒。

  • 支持多个节点同时写入,写入速度:60万条/秒/节点,同等条件下,写入速度比Elasticsearch快10倍以上;

  3、多场景智能分析平台能力

  • 算法平台基于最新架构和人工智能算法,具备强大的智能化分析能力,为上层业务提供算法支撑和扩展。

  • 内置多个智能分析场景,包括日志智能搜索及上下文分析、日志模式自动识别、基于算法的智能异常检测、智能告警及指标告警对接、日志与应用性能监控、基础监控数据的融合关联分析等。

  方案价值

  基于海量日志数据的云智慧智能日志分析方案已经在航空、金融、能源等行业的智能运维项目中成功实施,实践证明此平台能给行业客户带来明显的改善和提升:

  1、实现离散日志的统一采集、处理、存储、归档以及查询,极大提升日志管理和分析的便捷性;

  2、基于实时日志数据智能分析帮助业务人员及时掌控业务运行状态,快速发现业务运行的异常并及时报警,减少业务中断时间;

  3、基于业务日志数据、应用性能监控数据、基础资源监控数据的融合分析,实现复杂线上业务及系统问题原因的快速定位,提升复杂问题处理的效率。

  客户案例实战

  某航空企业的主营业务是面向航司及上下游服务商,提供业务处理、电子分销、结算清算等服务,当出现性能缓慢或中断时,现有监控系统无法有效定位故障和异常。

  针对此用户需求,云智慧为该企业构建了基于海量实时业务日志数据的业务运维智能分析平台,通过对业务数据的实时采集、处理、多维度智能分析,及时发现系统业务层面异常情况,增强该航空客户业务预警、故障诊断与智能分析能力。

https://www.cloudwise.com/images/dola/dola-6.png

­

  此平台多次提前发现业务处理响应时间变长、业务指令交互错误率增加等故障先兆,基于智能分析算法对即将发生的异常作出预测和及时告警,从而有效避免故障的业务风险。

  总结和展望

  云智慧日志智能分析平台基于AIOps策略,融合基础资源监控、应用性能监控、用户体验监控等多维度运维数据和人工智能分析算法,能够及时发现业务运营中潜在风险,辅助管理人员作出准确判断和决策,实现对业务运营健康及未来发展趋势的持续洞察,增强企业核心竞争力。

特别提醒:本网内容转载自其他媒体,目的在于传递更多信息,并不代表本网赞同其观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,并请自行核实相关内容。本站不承担此类作品侵权行为的直接责任及连带责任。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。


返回网站首页 本文来源:互联网

本文评论
第五代扩音器得胜DA5迷你扩音器集麦克风、功放、扩音器于一体
6月11日,第五代扩音器“得胜DA5迷你扩音器”在国内正式亮相。
日期:08-12
齐向东:内生安全框架要立足解决未来20年网络安全
8月12日,以“并肩应对威胁挑战”为主题的2020中国网络安全年会在网上成功召开。奇安信集...
日期:08-12
速读腾讯财报 Q2收入1148亿元 微信生态促进“内循环”
8月12日晚,腾讯控股(HK,00700)发布2020年二季报,实现营业收入1148.83亿元,同比增长29%,Non-IFRS净利...
日期:08-12
MAXHUB会议平板荣获德国iF设计大奖背后,真正好用的会议平板实力何在?
智能办公时代,企业对于办公设备的要求不再停留在提升办公效率层面,而是延伸出包括产品外观、功能人...
日期:08-12
苏宁818活动什么时候开始?这份购物宝典快快get!
2014年张近东动员京东全体员工,宣布将每年的8月-11月定为公司的“百日大战”,由于天猫双...
日期:08-12
宁畅线下“首秀”携五大机型亮相  诚邀各界伙伴莅临CITE2020展区
8月14日-16日,第八届中国电子信息博览会(CITE2020)将在深圳会展中心举行。宁畅信息产业(北京)有限...
日期:08-12
腾讯教育联合智谷星图、FISCO BCOS开源社区推出全国线上区块链(工科)师资培训课程!
根据拉勾大数据研究院发布的《2020年新基建人才报告》的报告显示,随着更多新基建人才需求被释放,...
日期:08-12
全网剪辑师“拯救喵大大”:投稿原视频赢万兴喵影超级大奖
一场关于“拯救喵大大”的原生视频素材征集行动,正在B站、微博持续发酵。
日期:08-12
京东数科完成转型 助力城市服务
前段时间,京东金融APP悄然上线了一项新功能,那就是京东交通卡。 据了解,此功能是京东金融与华为携手...
日期:08-12
当贝和泰捷盒子对比,配置、系统全方位真实介绍!
随着小米在十周年之际推出OLED大师系列的高端电视,国产电视的上限被提升到了透明电视的级别。科技发...
日期:08-12
专业电视盒子排行榜:高性价比电视盒子推荐
作为一个电视盒子从业者,看到很多人购买电视盒子都会踩坑,买了配置低的体验差的盒子回去用,因此给各...
日期:08-12
解码世纪互联蓝云:从微软背后的“隐形人”到“新基建的云伙伴”
小王是某企业的IT管理员,自从公司使用微软Azure云服务之后,在享受到成本降低、效率提升等诸多优势...
日期:08-12
不玩科技玩情怀!京东热8购物季独家首发尼康Z5
尼康Z5全画幅微单可谓是相机行业今年最受关注的产品之一了。还没开售,就有大批发烧友们放在愿望清...
日期:08-12
引领八月消费热潮 京东“热8购物季”撬动线上电器消费市场
经过多日的爆品秒杀“热身”,8月12日,京东“热8购物季”正式开启,以爱之名...
日期:08-12
黑鲨3S 2020年下半年最值得入手的游戏手机
流火八月,游戏手机市场和这个夏天一样火热,各大游戏手机品牌集中发力,展开了2020年下半年的终极...
日期:08-12
远离电信诈骗,ColorOS 7.2 用户记得开启这个功能
随着暑假的来临,针对孩子的电信诈骗也进入高发期。而在日常生活中,忙于工作的家长大多无法做到时...
日期:08-12
阿里巴巴市场公关主席王帅或离职
创头条讯,阿里巴巴集团合伙人、市场公关委员会主席王帅8月11日在朋友圈晒图称,“想退休&rdqu...
日期:08-12
福布斯丨用机器人服务员,重新定义「中国火锅」
近日,全球餐饮机器人行业标杆企业擎朗智能的机器人落地拉斯维加斯的智慧火锅餐厅THE X POT,引起全球...
日期:08-12
齐聚苏州 共襄盛举 2020全球智博会本周开幕
  8月10日,2020全球人工智能产品应用博览会(AIExpo2020)新闻发...
日期:08-12
张歆艺提前预热苏宁易购818 直播间内狂撒“五折爆品”底气足
二姐张歆艺发话啦,8月12号,她要在苏宁易购直播和抖音苏宁易购超级买手直播间开播,一大波“五折...
日期:08-12
  专栏介绍
海露 的专栏
海露发表的文章
积分:
自我介绍 :