精品三级久久久,国产一区精品在线,亚洲va欧美va人人爽午夜,激情综合网址

當前位置:首頁 > 科技  > 軟件

資損防控技術體系簡介及實踐

來源: 責編: 時間:2023-08-20 23:17:19 12645觀看
導讀一、資損防控介紹得物提供大量商品買賣等服務,資金流轉量大,任何由于設計缺陷、系統缺陷、系統故障、人為操作、安全漏洞等因素都會引發直接或間接資金損失。資損防控就是在項目全生命周期內,引入多種資金分析和控制手段

一、資損防控介紹

得物提供大量商品買賣等服務,資金流轉量大,任何由于設計缺陷、系統缺陷、系統故障、人為操作、安全漏洞等因素都會引發直接或間接資金損失。資損防控就是在項目全生命周期內,引入多種資金分析和控制手段,預防資損故障或控制資損故障影響范圍。V0L28資訊網——每日最新資訊28at.com

那么在日常工作中,具體如何開展呢?主要可以從以下三個方面來做:V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

1.機制流程建設

V0L28資訊網——每日最新資訊28at.com

在業務項目開始時,我們應該評定項目資金風險等級,比如高風險需要重點關注&投入,中風險需要投入多少資源,低風險又如何保障。V0L28資訊網——每日最新資訊28at.com

在項目資金風險評定后,產品架構設計時需要包括技術風險設計,比如冪等、分布式數據一致性、異地多活等。V0L28資訊網——每日最新資訊28at.com

然后對于高資金風險項目,我們需要出專門的資金風險系分,在得物重點關注資金流、信息流以及物流的流轉,比如業務的高保鏈路是怎么樣的,有哪些資損風險點等。V0L28資訊網——每日最新資訊28at.com

接下來就是對輸出的資損風險點進行布防,布防的形式主要是核對和監控,核對為主,監控作為兜底,因為前面輸出的資損風險點可能會有遺漏,監控是業務異常的感知手段。日常我們也可以通過混沌工程進行風險挖掘&核對規則驗證。V0L28資訊網——每日最新資訊28at.com

最后我們需對資損風險告警進行應急,拉起應急小組排查確認風險并修復。V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

2.人員陣型建設

V0L28資訊網——每日最新資訊28at.com

資損防控并不是靠某一個角色來承擔,而是需要架構、研發、質量和SRE一起來防控并嵌入日常工作流程中,從組織架構視角,我們需要建立至少三道防線,即研發防線,質量防線和SRE防線,相互兜底,合并共舉達到資損防控的目的。當然各角色在項目各個階段各有側重,比如SRE負責業務線上穩定性,那么線上的資損防控投入相對大一些。V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

3.多體系防控

V0L28資訊網——每日最新資訊28at.com

從發現資損風險時效視角來說,可以分為實時核對(T+0)、近實時核對(T+M)、離線核對(T+H, T+1),每種核對方式都有其適配的業務場景,并不存在替代之說,比如不落庫的配置變更適用實時核對,業務定時任務適用離線核對等等。實際業務場景布防時需分析業務特點,然后再使用合適的核對體系工具。在組織分工方面,研發側重離線核對,測試側重近實時核對,SRE側重實時核對,當然實際工作中并不必這么界線分明,自己看到的風險點,可以選用合適的工具體系。V0L28資訊網——每日最新資訊28at.com

從核對是否影響業務運行視角看,可以分為旁路核對和主路核對,旁路核對的結果對業務運行不構成影響,僅僅是風險揭示,而主路核對是有能力影響業務運行的,比如資損熔斷用的就是主路核對技術,在核對告警報出后中斷業務運行。目前公司已有的A、B平臺都屬于旁路核對體系。V0L28資訊網——每日最新資訊28at.com

在布防核對規則后,我們怎么檢驗布防的有效性,同時因為業務迭代發展,早前布防的核對規則需要調整核對邏輯來適配新的業務邏輯,也就是說我們如何保鮮核對規則?這就需要混沌工程資損演練來支撐了。資損演練又分為有損演練和無損演練,比如在線上搞有損演練時經常把金額數據加/減0.01,檢驗布防的核對規則是否發現,這樣即使發生了實際資損也在演練預算可以覆蓋的范圍內,但在線上搞有損演練需謹慎評估影響范圍。資損防控無損演練關鍵在于生產庫的克隆,這樣在演練時做數據篡改并不影響線上業務運行。V0L28資訊網——每日最新資訊28at.com

二、資損防控技術體系

我們在做資損防控時,最重要的一步是風險識別,它是資損核對布防的源頭,可以這么說,如果沒有風險識別就沒有接下來核對布防。風險識別可以通過人工分析和智能系統推導兩種方式得到,從建設發展階段來說,人工分析通常是最開始采用的方式,在這個基礎上,再通過算法推導+專家經驗發展出智能系統推導。下面依人工分析視角來展開,這里舉例一個簡化版得物系統的資損防控如何做。如下圖所示,左邊為商品交易業務鏈路,其中包括用戶下單交易和運營配置商品:V0L28資訊網——每日最新資訊28at.com

圖片圖片V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

2.T+M核對

V0L28資訊網——每日最新資訊28at.com

通過數據庫Binlog可以實現分鐘級的資損核對,這種核對方式對于業務上下游一致性風險有非常好的發現能力,日常配合混沌工程的無損演練能力,對于未覆蓋到資損風險也可以很好的揭示出來,所以T+M核對適用于涉數據庫字段的一致性風險、蓋帽等業務場景。V0L28資訊網——每日最新資訊28at.com

圖片圖片V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

3.T+0核對

V0L28資訊網——每日最新資訊28at.com

隨著業務的發展,對于資損核對也提出更高要求,我們需要發展出實時核對能力。比如可以通過業務插樁的方式來實現同步/異步觸發,同時實時監聽業務執行消息,然后數據路由至具體業務域執行核對邏輯,這種核對方式屬資損防控領域的重武器,適用于業務型風險、配置型風險,同時滿足復雜業務核對場景。目前SRE已經在建設T+0實時核對系統。V0L28資訊網——每日最新資訊28at.com

圖片圖片V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

4.資損演練

V0L28資訊網——每日最新資訊28at.com

資損演練可以驗證布防的核對規則有效性,又可以用來挖掘未覆蓋到資損風險,所以資損演練是資損防控體系很重要的一環。資金無損演練有以下三個關鍵點:V0L28資訊網——每日最新資訊28at.com

  • 資損防控落地的規則都是針對業務數據來執行的
  • 資損防控無損演練的數據來自生產環境
  • 無損演練數據與生產環境數據實質是隔離的

下圖為初步的資金無損演練方案:V0L28資訊網——每日最新資訊28at.com

圖片圖片V0L28資訊網——每日最新資訊28at.com

三、得物業務實踐

作為支持得物業務的SRE主導了得物履約資金安全保障工作,由于得物履約的業務鏈路長,風險敞口大,我們認真考慮了業務穩定性及其資損風險并實踐了前述的相關資損防控理念。V0L28資訊網——每日最新資訊28at.com

圖片圖片V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

1.高保鏈路梳理

V0L28資訊網——每日最新資訊28at.com

出價、下單、支付、發貨、結算、營銷、逆向7個業務域定義出高保業務鏈路,輸出資損點、變更點、新增表及字段以及相關監控點。V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

2.工具選型

V0L28資訊網——每日最新資訊28at.com

依托現有工具平臺進行布防,成本最優解。V0L28資訊網——每日最新資訊28at.com

圖片圖片V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

3.規則布防

V0L28資訊網——每日最新資訊28at.com

資損防控通過核對規則落地,同時業務監控配置告警規則,通過混沌工程演練驗證規則有效性。V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

4.觀測告警

V0L28資訊網——每日最新資訊28at.com

a. 應急響應V0L28資訊網——每日最新資訊28at.com

b. 自動巡檢V0L28資訊網——每日最新資訊28at.com

    i. 每天自動巡檢重要指標推送到對應的工作群V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

5.演練

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

a. 對相關規則進行保鮮V0L28資訊網——每日最新資訊28at.com

b. 未暴露風險挖掘V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

6.實時核對體系建設

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

V0L28資訊網——每日最新資訊28at.com

a. 業務插樁先旁路核對,后可阻斷核對。V0L28資訊網——每日最新資訊28at.com

四、總結&展望

在得物落地資損防控期間,作為SRE一直在宣導的理念:資損防控需要研發、測試、SRE三方相互協作,三道防線相互兜底,合并共舉達到資損防控的目標。未來,資損防控我們重點關注以下3個方面:V0L28資訊網——每日最新資訊28at.com

  • 風險分析--目前我們主要還是基于專家經驗,后續我們將通過數據染色,血緣分析,做到自動化的風險輸出。
  • 多體系防控--完善資損防控體系建設,抽象通用防控能力與可擴展的精細化防控能力,做到核對工具體系與業務場景相適配。
  • 資損演練--在大規模的業務體系之下,純靠人去做攻擊,其實是不太現實的,必須得靠智能化、數據化的方式去驅動。同一個故障,我們讓它在成百上千個系統上面去重放,這樣我們就可以非常高效地去實現大規模風險的挖掘,驗證風險防控規則的有效性以及已布防規則的保鮮。

本文鏈接:http://www.8884hu.com/showinfo-26-6218-0.html資損防控技術體系簡介及實踐

聲明:本網頁內容旨在傳播知識,若有侵權等問題請及時與本網聯系,我們將在第一時間刪除處理。郵件:2376512515@qq.com

上一篇: DDD 與 CQRS 才是黃金組合

下一篇: 阿里云推出大規模視覺語言模型Qwen-VL 已在ModeScope開源

標簽:
  • 熱門焦點
Top 精品三级久久久,国产一区精品在线,亚洲va欧美va人人爽午夜,激情综合网址
久久久在线视频| 欧美日在线观看| 欧美一区二区三区成人| 亚洲欧美在线免费观看| 欧美亚洲一级| 国产精品资源在线观看| 亚洲国产精品一区| 美女91精品| 国产精品呻吟| 亚洲高清视频在线| 亚洲一区美女视频在线观看免费| 久久精品日韩欧美| 欧美日韩国产123区| 国产一区二区三区免费在线观看 | 国产欧美91| 亚洲国产免费| 欧美一区=区| 国模精品一区二区三区| 久久一综合视频| 国产精品亚洲аv天堂网| 亚洲激情视频| 久久国产欧美| 国产精品成人免费视频| 亚洲黄网站黄| 国产亚洲一区二区三区| 9i看片成人免费高清| 欧美专区福利在线| 国产精品h在线观看| 亚洲激情午夜| 欧美日韩专区| 小嫩嫩精品导航| 欧美视频一区二| 91久久夜色精品国产九色| 国产专区综合网| 香蕉久久夜色精品国产| 伊人久久大香线蕉av超碰演员| 老司机午夜精品视频| 亚洲肉体裸体xxxx137| 久久一区二区三区四区| 国产女主播一区| 开心色5月久久精品| 99riav久久精品riav| 国产欧美日韩在线观看| 国产精品久久久久久超碰| 日韩午夜三级在线| 美女久久一区| 激情另类综合| 欧美日韩国产欧| 亚洲区中文字幕| 国产精品日韩在线观看| 久久婷婷激情| 夜夜爽夜夜爽精品视频| 欧美日韩国产页| 欧美精品一二三| 亚洲国产你懂的| 国产精品视频内| 国产精品亚洲а∨天堂免在线| 欧美韩国一区| 亚洲精品久久久久久久久久久| 国产精品久久久久7777婷婷| 久久久午夜电影| 狠狠色伊人亚洲综合网站色| 免费日韩av| 亚洲激情中文1区| 国产色爱av资源综合区| 欧美精品在线观看播放| 欧美在线视频免费播放| 久久久精品日韩| 一区二区三区在线观看国产| 久久久久高清| 久久中文久久字幕| 欧美中文字幕在线播放| 久久久噜噜噜久久人人看| 精久久久久久| 久久视频国产精品免费视频在线| 在线视频日韩| 亚洲国产精品小视频| 国产亚洲二区| 亚洲观看高清完整版在线观看| 国产一级揄自揄精品视频| 一色屋精品视频免费看| 国产亚洲精品久久久久动| **欧美日韩vr在线| 欧美激情一区二区三区成人 | 欧美一区二区高清在线观看| av不卡在线看| 在线播放中文字幕一区| 国产欧美一区二区精品婷婷| 狠狠爱综合网| 国产亚洲亚洲| 亚洲精品少妇| 国产伦精品一区二区三区免费| 国产欧美一区二区精品性色| 久久精品在线观看| 欧美成人精品1314www| 在线性视频日韩欧美| 国产精品香蕉在线观看| 国产一区二区欧美日韩| 国产一区二区三区网站| 91久久久在线| 亚洲人成小说网站色在线| 亚洲一区观看| 美女黄网久久| 欧美国产成人在线| 国产精品综合网站| 国产美女精品一区二区三区| 亚洲国产精品久久久久婷婷老年 | 黑人巨大精品欧美一区二区小视频| 亚洲人午夜精品| 日韩午夜av在线| 影音先锋欧美精品| 国产一区视频网站| 99re视频这里只有精品| 久久久久久尹人网香蕉| 久久婷婷国产综合精品青草| 国产精品av免费在线观看| 久久精品国产综合| 欧美日韩八区| 久久久亚洲精品一区二区三区| 欧美精品国产精品| 欧美日韩国产精品一区二区亚洲| 国产日韩一区在线| 狠狠色丁香婷婷综合影院| 一区二区三区欧美亚洲| 久久综合一区二区| 欧美精品网站| 欧美日本不卡| 欧美日韩在线播放三区| 亚洲第一中文字幕| 日韩一级免费| 美乳少妇欧美精品| 国产欧美一区二区三区久久| 尤物视频一区二区| 欧美一级在线亚洲天堂| 国产精品va在线| 国产一区二区三区在线观看免费 | 一区二区av在线| 老司机精品久久| 国产亚洲精品久久飘花| 亚洲国产精品电影| 亚洲国产日韩欧美在线动漫| 亚洲精品国久久99热| 久久这里有精品视频| 国产日韩欧美综合一区| 亚洲国产高清aⅴ视频| 久久不射2019中文字幕| 国产精品久久久久久久久免费樱桃| 国产免费观看久久| 亚洲视频999| 欧美日韩一区二| 国产视频一区在线观看| 午夜精品久久久久久久| 国产精品magnet| 娇妻被交换粗又大又硬视频欧美| 欧美一区二区啪啪| 国产欧美日韩三区| 亚洲精品乱码久久久久| 女主播福利一区| 欧美精品日本| 国产精品久久久久久久久动漫| 合欧美一区二区三区| 国产精品久久| 一区二区高清视频| 欧美日韩三级一区二区| 国产最新精品精品你懂的| 久久精品国产清高在天天线| 国产精品中文字幕在线观看| 亚洲黄色av| 欧美精品九九99久久| 亚洲人成网站在线观看播放| 欧美激情一区二区三区全黄| 久久亚洲不卡| 韩国精品久久久999| 久久久久久久久久久久久久一区 | 欧美精彩视频一区二区三区| 在线日韩视频| 免费在线一区二区| 国产欧美一区视频| 欧美主播一区二区三区美女 久久精品人| 国产日韩欧美一区二区| av不卡在线观看| 国产精品免费观看视频| 性欧美video另类hd性玩具| 国产美女精品人人做人人爽| 日韩视频在线观看| 欧美午夜精品一区二区三区| 亚洲手机成人高清视频| 亚洲最新在线| 欧美三区在线视频| 亚洲免费在线播放| 欧美成人资源网| 欧美成人第一页| 国产拍揄自揄精品视频麻豆| 99这里只有精品| 国产精品久久久久国产a级| 欧美一级二级三级蜜桃| 极品少妇一区二区| 欧美精品在线免费播放| 亚洲国产高清在线| 欧美日韩视频一区二区三区|