澳门威尼斯人注册网址【官网首页】
做最好的网站

听别人说日志数据深入剖析的全速运转,2017双11海量数据下EagleEye的重任和挑衅

来源:http://www.ogcoffee123.com 作者: 服务器&运维 人气:174 发布时间:2020-02-03
摘要:“双十一”刚刚甘休,其实最忐忑的不是商店理货,亦非网民紧盯大促商品打算秒杀,而是网上购物幕后的运营职员,他们最顾虑:什么互联网中断、应用卡顿、响应速度慢,服务器宕

“双十一”刚刚甘休,其实最忐忑的不是商店理货,亦非网民紧盯大促商品打算秒杀,而是网上购物幕后的运营职员,他们最顾虑:什么互联网中断、应用卡顿、响应速度慢,服务器宕机……

摘要: EagleEye作为Ali公司知名的链路追踪系统,其自己专门的工作虽不在交易链路上,但却监察和控制着全公司的链路状态,特别是在中间件的远程调用上,覆盖了公司绝超越50%的景色,在主题素材每一个审核和固化上揭橥着庞大的法力,保证了种种系统的安居,为全方位本领公司打赢本场大战遮风避雨。

双十生龙活虎当作电子商务 IT 部门的头等大事,大促前,运转人士就必要早早地抓实多套预备方案,并随时紧绷着神经,经历着无数14回模拟演习。他们在后端有微微不眠不休的晚间,不知所以。

背景 
双十意气风发直接是Alibaba集团每年一次要打的一场战见死不救役。要打赢这一场战不着疼热,手艺上,不仅仅是多少个使用、多少个系统的事,亦非微微个开拓+多少个测验就会形成的事,而是需求各大系统同步应战、种种应用一个萝卜一个坑、本领人士通力同盟本领博取最终的常胜。

好像轻易的双十生机勃勃背后牵涉到是包含支付、构造、数据库、网络、运行、电力、客性格很顽强在艰难困苦或巨大压力面前不屈、物流等整套买卖配套底子设备的联合签字和核算。

EagleEye作为Ali公司有名的链路追踪系统,其自身业务虽不在交易链路上,但却监察和控制着全公司的链路状态,非常是在中间件的长间距调用上,覆盖了公司绝超越四分之二的风貌,在标题各个核实和固定上揭橥着庞大的效果,有限帮衬了各种系统的安家乐业,为一切技艺团队打赢这一场大战遮风挡雨。

双十九大促近些年,运营领域迈过了怎样坑?智能化运维初露端倪的今天,公司又该怎么样布局?带着那几个疑点,Info 访问了袋鼠云首席运行行家林杰,他原先支撑过Tmall网,Taobao,共享工作,无线职业手提式有线电话机Taobao,聚划算等 BU 业务运维,对运营领域有着本人独到的眼光。

图片 1

双十六大促最近几年 运营迈过的坑

图1 EagleEye系统一整合体景况

林杰记念:天猫商铺双十四大促最初起首于 2008 年,那时候依然Taobao商铺,一天的 土霉素V 唯有几千万,并且还未零点全体公民疯抢的概念。在大促前工程师们基本上会基于各自的资历剖断,比方服务器的当下负荷、应用的当下 RT 和 QPS,推断每台服务器最大能支撑多少力量等,然后几人商酌后就决定拍板,某某核心应用各自要扩展少台服务器,到底要扩展少服务器,实际上海大学家的心底没底,实在不放心有时再多申请扩大体积。总的来说那几个品级业务量也小,也能应付过去。

近四年公司业务和层面平素维持着火速的增长,纵深上,交易总量屡攀新的高峰,双十后生可畏零点的交易峰值也再叁回刷新了历史;横向上,公司涉及的正业和世界也持续的拓宽,五行八作在不断到场Ali(高德、优酷、友盟及小麦等等),合作前行。

后来几年随着Tmall牌子的升高,双十八大促逐年发生,原本的运行形式已经无可奈何适用。业务发展高效,后端的选取数量也大大扩张,各种应用系统之间的调用链路千头万绪。大促前到底要预备扩大容积多少能源?不可能拍脑袋热,因为你报名财富太多会恐怕被反驳回绝,申请少了你要肩负更加大的高风险。那时候我们是用线上压测的主意来清除,比方可以直接在临盆条件收取1 台服务器,通过模拟重放只怕直接引进多倍流量做压测,根据压测结果总括出单台服务器的最大可承载技能,然后用数字来讲话,去申请扩大体量。还会有正是不怕容积规划做形成了,但在零点峰值的时候依然也许会超过预期,系统大概会挤爆。所以又引进了限流和贬低,限流正是对生龙活虎一应用设置叁个最大阈值,当先阈值就立马拒却新的哀告,那样的功利便是保卫安全选取,制止雪崩。还会有正是降级,由于选用太多,在大促的之间,能够关闭部分非主旨作用,保障交易主流程的技能最大化。那些阶段的压测亦非完全规范的,主要难题是压测的局限性,只是对有个别应用做单独压测,可是选拔之间是有依附有关系的,特别是部分分享服务基本,基本上被有着应用都正视调用,那怎么做呢?后来几年岁月又研究开发出新的压测工具,全链路压测。这几个对于体积规划来讲,是全新的思绪,直接在生养条件上经过模拟复制发生庞大的流量,每一种环节都会被压测到,并有照望的督察类别配套,来寻找瓶颈点在何地,并快速优化。而且以此进程被自动化达成。

面对数码规模持续加码,怎么着应对在专业快速发展的背景下系统收罗的多少些级的穿梭抓好,怎样在更为大的多寡规模前面保险EagleEye本身业务的和煦,成为EagleEye今年双十二面对的巍然屹立搦战。

看得出,自动化运行是必然。

图片 2

零点疯抢背后的出打算策

图2 EagleEye扶持的业务处境

今昔的电商双十二大促活动依然继续零点疯抢格局,对于利用体系保险来讲,能无法如愿扛过前 15 分钟,甚至是前几分钟,成为最中央的涵养职责。林杰给出了以下几点提出:

全链路压测平昔是Alibaba公司维持双十生机勃勃的大杀器之生机勃勃,通过在线上境遇全真模拟双十黄金时代当天的流量来检查各类应用系列的载重技能。EagleEye在全链路压测中顶住了主要的权力和权利,透传压测标识完毕流量的分裂,压测数据的征集与表现用以扶持业务方的开销同学开采及定位系统的难题。所以,保证全链路压测也是EagleEye的严重性职分之后生可畏。 
今年的EagleEye 
无论是常态、全链路压测大概是双十一当天,EagleEye面没有错要害难题是如何保持本身系统在海量数据冲击下的春风得意,以至哪些更快的变现各样系统的情况及越来越好的增加援助开拓同学发掘及定位难点。二〇一五年,EagleEye通过了意气风发雨后苦笋改造进步升高了系统的牢固性,完结了越来越好更加快的辅助业务方定位及逐个审查难点。

a. 体量规划。 尽大概在生养条件做压测,只有资历过压测,心里才会有底。

图片 3

b. 关键应用要扶助限流。 零点全体公民疯狂的流量很只怕会超过预期,独有设置好限流能力维护好本中国人民银行使,不然现身雪崩式连锁反应。

图3 系统布局图

c. 对非大旨作用做降级。 每一回双十四会投入大批量的能源,基本会往宗旨交易类应用偏斜,那么非宗旨成效的降级一定水准上是可肩负的。

测算技术下沉 
最先的EagleEye在链路追踪以至数额计算都以依附明细日志完结,实时采摘全量的全面日志并在流总结中做聚合,随着业务量的提升,日志的数据量也在大幅度进步,总括量也随之线性拉长,能源消耗较高。并且在全链路压测或许大促时期,日志量会有简单的讲的峰值,极有非常大希望引致总计集群系统过载大概数额延迟以致有十分大恐怕形成数据的散失。

d. 应急预案。 对大概发生的极度现象提前策动。

为抽薪止沸那类难点,最早的做法是采集样板,通过采集样板减弱搜聚的日志量,进而稳固计算集群的载重及水位,保证EagleEye本人业务的喜眉笑眼,尽量降低业务峰值对大家的熏陶。可是带给的难题也是醒指标,计算数据在总结时须要思忖采集样板率算计出实际的数据,在访谈数据量非常小且采样率较高的场景下导致聚合后的数量不精确,不能够表现业务真实的情况,从而也就失去了其价值。

双十三大促是最优秀的弹性场景

为深透解除业务峰值对EagleEye总括集群的冲击,将有个别实时计算逻辑下沉到业务方的机器中,使得业务量和所需采撷的日志量解耦,保险总括集群的平稳。具体实现是在业务方的机器上先将数据依据钦命维度做聚合(平日是以时间维度),计算集群众性采矿业集该总结数据后重新集结,比非常大的安居了总结集群的负荷。

弹性是云总括的最大优势,而大促是最登峰造极的弹性场景。

图片 4

随着云总结特别是公有云的普及,将来的运转职员许多无需关心机房、网络、操作系统等尾部设施。在不断地练习后,近来的电子商务平台早就接收弹性可扩张的云计算平台,合作遍及式数据,高效的 CDN 分发来实现负载均衡,防止在双十生龙活虎中午高产出状态下崩盘。启迷人士将越来越多精力转移到飞快上线,神速迭代,去协助工作发展。

图4 计算本事下沉

大促活动的流量跟平日完全不在三个量级,完全能够采纳云财富的按需使用,来完成扩大体量的供给,况兼在花销上是伟大的节约。除了扩大体量以外,当然还索要预备救急预案。收拾出当天或许现身的万分情状,提前预演。

测算技艺下沉,也足以领悟成将总结布满式化,消耗了作业方相当的小的生机勃勃有的财富,保障了EagleEye集群的平稳。并且,集群的总括量不再随着业务量的进步而增进,只随应用范围(应用数量、机器数量)和总结维度的增进而滋长,不会再冒出由于业务量的蓬蓬勃勃须臾峰值招致Computer群的负载过高的难点,最后使得EagleEye在全链路压测和大促时期都能保全平稳水位,并且现身精准的数目。

2018年天猫商场双十豆蔻梢头开场只有十分钟,世界支付纪录被重复刷新。支付宝发表的多少彰显,在零点 9 分 39 秒,支付宝的支付峰值达到 12 万笔/秒,是二〇生机勃勃四年的 1.4 倍,刷新了二零一八年创出的峰值纪录。在开发办公室法的选拔上,花呗和余额宝成为这些受网上朋友迎接的成本办法,笔数占比分别高达 29% 和 18% 。

场景化链路 
EagleEye一贯留心于中间件层面包车型地铁调用,而阿里Baba的业务量宏大,系统也比较复杂,所以各部分的效益区划相比较清晰,中间件层面包车型地铁黄金时代部分数额比较难与业务数据相关联,对于链路追踪、难题一定及针对钦命业务场景的体积规划等都有生机勃勃对难度。

经得起巨额交易,玩得起光速秒杀,技术系统抗得住,报酬率流动性各类安妥……只有经得起双十生龙活虎的顶峰核准的才终于真正的神器!

现年,EagleEye推出场景化链路的机能,开放了增多业务场景标的本事,相像于压测流量打压测标,对点名的事体打上对应的政工场景标签,并涉嫌该标签下全数的中间件调用(饱含服务、缓存、数据库和新闻等),一是能够帮助业务方开采同学越来越好地有别于有些RPC流量中的业务语义,二是能够清晰的梳理出某些业务场景标下对应的RPC流量,对分析部分至关心珍爱要目标,如缓存命中率,数据库RT等有很大的援助。

天弘基金依据日志数据解析的急速运营

图片 5

对此天弘基金以来,如何保管余额宝在双十生龙活虎的流动性和收益率平稳是一大挑衅。

图5 流量场景标

线上系统最健康的难点一定情势,正是日记深入分析了。接下来大家以余额宝为例,器重分析天弘基金在日记数据剖判世界是哪些突破的?

依赖此数额,也得以越来越好的复局全链路压测数据。在压测早先(也足以在常态下)对第豆蔻梢头业务打上钦定的标签,压测后经过各专门的事业场景的流量得出相应的习性基线,越来越好的永世主题链路中的难点及质量拼劲,进步压测的频率和价值。 
精细化监察和控制 
EagleEye的链路数据对于难点的开掘和定点有所首要的法力,越发助长的数码格局和表现对增高意识的频率有显而易见的晋级。

原先,天弘基金向来利用开源的 ELK 日志方案,研究开发和平运动维人士通过 ELK 对日记数据实行拍卖,使用日志文件实行询问检索。随着应用途景的不断深远,以致内部人士须求的不停充实,天弘基金希望通过日记分析来消除运转和平运动用相关的新主题材料,在这里下边,选拔和袋鼠云合营。具体包涵以下几个方面:

在一切双十生机勃勃备战进程中,遭逢并减轻了过多生老病死。个中,单机难题占了超大的百分比。在遍及式系统中,单机难点是相比较宽泛的大器晚成类主题材料, 由于此类主题材料一再与事务代码不直接有关,与容器可能机器有必然的关联性,且现身的概率比较小,有自然的随机性,导致该难点一再相比较难每种核实。实际业务的表现恐怕是RT的振憾,也大概是小可能率的错误等等。

大器晚成、数据脱敏

EagleEye的调用链就算可以火速定位此类主题材料,不过调用链是站在单次诉求的眼光上,在一定到有个别IP之后很只怕还须要再解析越多的多寡才干做定夺,针对此类的难题,EagleEye提供了错误TopN布满以致系统火热图等职能,扶持业务方开拓同学快速定位难点。针对单机故障,往往对于全体的指标影响十分小,通过接受等第的监督数据相比较难定位,EagleEye在流总括中执会考察总计局计了运用各种机器的谬误情状,汇总并列排在一条线序出Top10的机器,风姿洒脱旦现身单机故障,能够很显眼的一定到现实的IP,况且依照该IP对应的失实数量得以高速做出裁决,减少了支付同学每种调查难点的日子。系统火爆图在压测和大促时期对系统健康度的显示非常清晰,一是能够清晰看出是还是不是留存离群点的机械,二是能够表明流量的去向是或不是正确。

天弘基金存有恢宏的个人客户音讯,日志文件中都会保留个人和存折四要素新闻,那么些数量都归属个人隐秘,原有 ELK 方案不或然屏蔽那个乖巧数据,无法从根本上肃清难题。以后开采人士须要查阅日志的时候,旁边都必须要随着三个运营职员,在运转职员的监察下才得以查看日志。仅仅在查日志那样三个精简进度中,都急需多浪费一个运营职员的年华,不唯有协作工作功用低,且不可能解放运维职员的监察专门的学业。

图片 6

袋鼠云日志数据脱敏成效,能够透过轻巧的安装解决那生机勃勃标题。安全管理员选拔日志文件中须要脱敏的字段,以表达式相配的作品打开改造,系统将活动过滤转换到脱敏后的消息,同期,结合权限决定效果,对无权查看日志原来的作品的客商自行屏蔽敏感数据音讯。

图6 系统热门图

经济顾客对日记中的敏感数据开展脱敏是广大须求。诸如银行卡、居民身份证、手提式有线电话机号等等,标志客户身份的音信脱敏。袋鼠云日志除了帮忙那个健康数量的脱敏,还协助自定义脱敏法规。通过自定义脱敏法则,能够增量增添客户所需的自由脱敏法规。

更增进的生态 
在Alibaba,EagleEye是意气风发款难点逐个审查的利器,从来服务于业务方的同学支持其飞快发掘并定位难点,收缩故障的持续时间,提高开荒及运维功用。其实,EagleEye底层还富含着生机勃勃份海量的数码,在近一年中,大家不住地行使及打桩那份数据的意义,希望表达其更加大的股票总值,相同的时候也盼望基于那个多少构建生龙活虎套生态系统,帮忙客商越来越好发展工作,时期也孕育出非常多有价值的付加物,为公司的本事升高打下了根底。

二、采募能源管理调节

天秤项目:天秤基于EagleEye的光景数据及中间间件、系统目标等监控数据,结合别的多款监察和控制成品创设三个系统牢固技术方案,意在缓和难点非常快发掘和精准定位、大促常态化、压测常态化等主题素材。

天弘基金所有线上作业的服务器能源,都必得保险 24 小时不间断对外提供劳动,並且作业和应用程序都要保证高可用。任何外界程序或第三方采取都不可能影响临盆条件的平静运维,全体配置在服务器上的次序,都不可能对利用种类具备侵入性。同不经常间,铺排在服务器上的搜罗程序也要透过严苛的压力和总体性测量试验,确定保证搜罗程序不会对工作系统爆发别的影响。

考查员安插 – 更轻量化的全链路压测:尖兵安排基于EagleEye的中间件、系统指标及压测数据,完毕常态化全链路压测和难点意识,是维持双十风姿洒脱及全链路压测顺遂的大杀器之意气风发,相比较二〇一八年八遍全链路压测,二〇一八年条件加倍复杂,可是只必要一回全链路压测就产生指标,为公司节省上千个人工,大幅度晋级交付上线品质和大促效率。

袋鼠云日志在成品设计之初就从头考虑怎样最大程度裁减日志收罗顾客端对服务器的熏陶。云日志通过对 Agent 搜罗程序的财富管理调控,从财富节制到特别终止提供安全保持。

精准回归:依托EagleEye调用链收集与总括的力量,完毕了测验用例精准推荐的功力,并在部分使用的精准测验中节省了八分之四~百分之七十的测验时间。精准测验通过EagleEye收罗,数据回流的方案的出口,在大范围使用上(千万链路)做到了测验用例与行使代码链路的准实时生成。

第意气风发层:能源节制

天图项目:天图注重了有的EagleEye的链路数据,为顾客提供面向复杂专业链路、高度分布式结构下的Application Performance Management (APMState of Qatar方案,以完备、实时、可视化、智能的法门令你快速了然应用和作业链路的全貌。

袋鼠云日志将 Agent 的运作占用能源拓宽严加界定,比方:CPU 占用率不可能超越5%,内部存款和储蓄器占用率不能够凌驾 100M,带宽占用无法超过500KB/s,该阈值能够经过页面自由定制。生机勃勃旦能源约束开启,Agent 将会在该阈值允许范围内运营。若是有日志量暴增的情事时有产生时,Agent 也会自行举行能源制止。

结语 
现年的双十九是二回周到的双十豆蔻年华,能够说是技巧团队的凯旋而归,EagleEye在这里次大考中也交出了风流洒脱份像样完美的答卷,无论是在全链路压测中依旧双十意气风发当天,系统的平静和数量的实时性都落得了预想,为业务方的提供了刚劲的支撑,提升了难题各种核实的功能。

第二层:Agent 自刎

然而,今后的路还非常长,智能化的演变步伐越来越快,业务方对EagleEye的多寡品质的须求也更为高,以往EagleEye会专一于结构的变异和智能化的推动,进一层进步难点一定的频率,越来越好的协理起基于链路数据的一片生态。

当发生极为特殊的情景,以致财富节制失效,Agent 占用能源超越设定阈值,袋鼠云日志的 Agent 会通过自刎机制将经过终止,足够保持事务体系的安全性。在系统牢固后,重启并苏醒Agent,可将事前疏漏的日记进行重新搜罗,保险日志数据不丢弃。

三、调用链路分析

天弘基金的事务系统利用遍布式结构划设想计,并引进蚂蚁金融云的 Sofa 框架进行付出,Sofa 框架能够透过配备来达成日志文件的生成,每种系统都浮动多量的调用链路日志。那个日记原本从不行使市场股票总值,但经过日记剖判能够开采,基于日志的布满式调用追踪系统,其首要核心在于调用链,为各种央浼生成全局唯生龙活虎的 ID,通过它将不一样体系的“孤立的”调用音讯涉及在黄金时代道,还原出越多有价值的音讯。

如何使用这几个日记来帮衬客商展开解析是云日志要解决的标题,经过生龙活虎段时间对 Sofa 日志文件的研究,袋鼠云日志成功将中间的调用链路举办剖判,以可视化的法子为客户显示各中央之间的调用关系,以至接口的调用成功失败次数、调用耗费时间等关键音讯。

调用链路具体的运用处景富含以下多少个方面:

A. 定位特别总计耗费时间

通过调用链路在职业极度日志的错误消息中找到 TraceID,在系统中得以见见调用链中切实的状态,在调用链上更直观地稳住到难题,层层排查后鲜明难点的随地。

B. 调用链下钻报表

对此布满式调用追踪系统来说,不仅提供调用链功用,相同的时间能够监督全体中间件的具体意况。由此,在产生调用链的历程中也会产生朝气蓬勃份详细的调用监察和控制报表,与其余监察的差别之处在于:该监控报表是含有上下钻取效用。因为调用链能够形成各样维度的报表,不仅可以够看出服务的动静,还是可以查阅其调用服务的动静,理解清晰的调用链新闻。

C. 全链路解析

全链路与调用链的区分是:全链路是三个施用全局的概念,而调用链是单体调用的历程。解析全链路的价值首要反映在以下几点:

链路拓扑形态剖析: 通过使用之间的调用拓扑关系,深入分析调用进度的源于和去向,识别不创设调用来源;

借助梳理和体量揣测: 识别易故障点 / 质量瓶颈、接口出错率等难题;依照链路调用比例、峰值 QPS 评估体量;

研发和管理人士能够便捷通过以上海广播台图定位故障或难题节点,并经过节点查看详细的接口调用解析与总括数据,用户能够很有益于的搜索难点所在。

全链路剖判追踪的最大优势在于,全体布满式应用之间的关联都以晶莹剔透的,各类交易或订单诉求在日记解析的底工上,都得以扩充沿波讨源,无需人工举行协查,有效减弱运行和研究开发职员的排障时间花费。

智能运行要正视数据和算法技艺兑现

运行的迈入阶段经验了从标准、工具化、自动化、到现在初露端倪的智能化,每一种阶段的上扬都表示了坐蓐力和效用的大幅度晋级,整个趋势是不可改变局面的。智能时期的运营不是要让运行人士待岗,而是对运行功能的增高有着庞大的伏乞,举个例子如何在纷纭的条件中神速定位难题、root cause、以至是故障预测,制止发出故障,保险应用稳固性。

林杰以为:智能运行要重视数据 (运行数据卡塔尔国和算法工夫兑现。首先运行技巧的提升不是间接跳到智能运营阶段的,必然通过规范化、工具化、到自动化的前行进度,唯有中度康健的自动化才干有功底力量。其次就是数码储存,要求大批量的运营数据,能够是日记数据、网络抓包数据、数据库数据等等。还会有普通运维爆发标记的数码,比方出一遍故障后,启动人士会记录下进程,这几个进度会上报到系统,反过来进步运转水平。最终正是算法,到底选拔哪一种算法模型做持续优化。

天弘基金在运营部门希望因此服务器品质日志收集深入分析,实时监督检查应用类别基本功财富的应用情形,通过募集客商端 Agent 搜集服务器和集群组件的 CPU、内部存款和储蓄器使用率,以可视化方式展现能源运维境况。

而袋鼠云智能运转施工方案基于自行研制的数据库管理调控、日志深入分析和大数量平台,可为天弘基金 (余额宝卡塔尔(قطر‎提供整机的运行应用方案。近些日子大器晚成期已接入数12个着力应用,服务器规模数百台,日志数据日增量到达T 级规模,扶助其促成了日志集中处理、日志深入分析、业务全链路、故障定位、数据脱敏等选择场景。故障开采、定位及回复功能大大提升,升高系统稳固。

依靠,天弘基金云日志平台项目已早前开展内部加大,在系统专门的学业运作时期得到了顾客承认,对客商的求实价值体现在以下多少个地点:

运营人士:数据脱敏作用帮忙运营职员解放人力;采募财富管理调整作用可避防范Agent 程序对服务器和接纳爆发震慑,有效制止祸殃性故障发生。研究开发人士:日志查询成效可方便急迅的询问日志文件;调用链解析支持理探讨员发人士急速牢固故障原因和难题点,协助理研商员发团队优化系统代码并进行布局治理。业务人士:监察和控制告急作用可及时开掘业务故障,最大程度上收缩故障响适当时候间,升高客户服务体验。管理人员:智能运营可实时掌握服务财富运营状态,并能够预测集群水位,提供功底能源扩大体积提议。

写在终极:

直到 11 月 12 日零点,2017 年Tmall“ 双十后生可畏 ”交易总额定格在 1682.69 亿元RMB。不断立异高的贩卖额、交易峰值、支付峰值,这几个惊人数字的私自倚仗的是何许的技能连串?智能化正慢慢步入IT 行当以至社会生存的各样方面。将来,利用大数据涉嫌剖判与机械和工具学习手艺为运行系统予以人工智能,提供从故障防御到故障定位、再到故障闭环的智能保险才干。大概到非常时候,运营程序猿也得以轻易玩转双十风度翩翩,妥妥的购物买买买啊!

作者:谢然

原稿来自Wechat民众号:高效开采摘运输营

本文由澳门威尼斯人注册网址发布于 服务器&运维,转载请注明出处:听别人说日志数据深入剖析的全速运转,2017双11海量数据下EagleEye的重任和挑衅

关键词:

最火资讯