《面向連接的智能運維體系:阿里大數(shù)據(jù)運維實踐》由會員分享,可在線閱讀,更多相關《面向連接的智能運維體系:阿里大數(shù)據(jù)運維實踐(33頁珍藏版)》請在裝配圖網(wǎng)上搜索。
1、面向連接的智能運維體系 阿里大數(shù)據(jù)運維實踐 大綱Big dataops產品運維歷程智能運維理念Tesla產品體系運維價值重塑01.02.03.04. OTSHadoop 02 04產品運維歷程01 Before 2012人工&腳本工具整合,業(yè)務增長2016智能運維體系建設Hbase GalaxyTTHistore MaxComputeAnalyticDBJstormSLS 032014自動化平臺2013 50 1/5 1:1產品運維歷程 困境 求變 新生2014產品運維歷程 智能運維理念 是否有可以借鑒? 何種智能理念? 產品發(fā)展方向和終態(tài)? 智能運維理念末端連接分析展現(xiàn)1.末端:直接操作 系
2、統(tǒng),應用程序,硬件,網(wǎng)絡 的產品。2.分析:實現(xiàn)運維人員思考問題,分析需求,排查故障的產品,3.連接:實現(xiàn)分析與末端產品驅動與反饋的連系產品。4.展現(xiàn):將智能平臺的狀態(tài) 以多種可視化的方式表達出來。 AEC T-FlowIDPS TDS ChangeLineT-cloneStarAgentCMDB ICS changefreeAlimonitor ACL智能運維理念 T-Flow 工作流 Simple Flow Multi FlowTesla產品體系 T-Flow關鍵末端產品-系統(tǒng)層指令序列調度的服務 Simple FlowTesla產品體系 T-FlowABC param1Tesla產品體系
3、 T-FlowSimple Flow Template/home/admin/update -t _%_param2 param3自動忽略自動重試異常報警自動忽略超時時間/home/admin/update -t _%_自動重試異常報警 cluster011.1.1.4$cluster011.1.1.5$cluster011.1.1.2$cluster011.1.1.3$cluster011.1.1.4$cluster011.1.1.5$cluster011.1.1.3$ clustre011.1.1.7$/home/admin/tools(-p t 3)-data) module1 yum
4、xxx module1) /home/admin/tools(-precheckyum xxx module1)yum xxx module1)yum xxx/home/admin/tools(-postcheck)-restart)/home/admin/tools(-p 1 t 4) Failed/home/admin/tools(-p 1 t 6)/home/admin/tools(-p 1 t 6) Tesla產品體系 T-FlowSimple Flow Instance 1 2 3 4Simple FlowInstanceTesla產品介紹 T-FlowMulti Flow Inst
5、ance= Tesla產品體系 T-Flow案例1. GalaxyUpgradePool2. UpgradeRegionServer3. FlightingUpdate simple flowsimple flowmulti flow Tesla產品體系 T-Flow Tesla產品體系 T-Flow Tesla產品體系 T-Flow Tesla產品體系 T-Flow 30000+實例運行Tesla產品體系 T-Flow Tesla產品體系 ICS intelligent Connection ServiceICS關鍵連接服務層-解決事件與末端產品的連接監(jiān)控事件日志分析 流程事件AECT-fl
6、owNoc Tesla產品體系 ICS外部系統(tǒng)監(jiān)控系統(tǒng)1監(jiān)控系統(tǒng)2 日志分析1其他第三方觸發(fā)器監(jiān)控系統(tǒng)1配置,數(shù)據(jù)監(jiān)控系統(tǒng)2配置,數(shù)據(jù)日志分析1配置,數(shù)據(jù)其他第三方配置,數(shù)據(jù)事件處理插件注冊抑制通知事件調度沖突檢查K-V 依賴執(zhí)行器T-flow 執(zhí)行器接口AEC執(zhí)行器接口SSH執(zhí)行器接口消息訂閱服務末端系統(tǒng)T-flowAECPSSHTclone其他末端服務 intelligent Connection Service系統(tǒng)架構 Tesla產品體系 ICS intelligent Connection Service案例盤古分布式文件系統(tǒng)一副本高危事件 Tesla產品體系 ICS intellig
7、ent Connection Service Tesla產品體系 ICS intelligent Connection Service Tesla產品體系 ICS intelligent Connection Service Tesla產品體系 ICS intelligent Connection Service Tesla產品體系 ICS intelligent Connection Service容量檢查,調參/縮擴容硬件異常 ,維修下線分布式文件系統(tǒng)副本高危加速修補核心應用服務Hang 緊急輪換 Tesla產品體系 TDS Troubleshoot Decision Service關鍵末
8、端分析型產品-提供通用線上故障智能分析及處理方案Checkpoint配置執(zhí)行類型:Check API,Check Script分析結果:example: A,B,C邊條件配置上游節(jié)點:Checkpoint 下游節(jié)點:Checkpoint / ICS上游結果表達式:case=A,case=C ,case=A&B 排查點1排查點2排查點3排查點4排查點5日志分析監(jiān)控報警故障工單ICSTesla產品體系 TDS Troubleshoot Decision ServiceTDS排查點6排查點7排查點8 Tesla產品體系 AEC & Crond關鍵末端產品-應用環(huán)境實時維護 rpm,文件,目錄低部署成本,簡單通用灰度發(fā)布,低消高效規(guī)則多樣,文件模板多級綁定,靈活組合 Tesla產品體系 AEC & Crond關鍵末端產品-集中管理線上服務器定時調度任務 Crond管理散亂執(zhí)行結果丟失異常通知機制積累日常任務效果數(shù)據(jù) D ata運維價值重塑自動化智能化 運維價值重塑2017T-Flow ICS TDS 提供工作流引擎&智能連接服務&智能故障排查服務,面向公有云及中小運規(guī)模提供開源版本,共建運維自動化生態(tài)代碼開源