Find N3入網(wǎng)：最高支持16+1TB
OPPO將于近期登場(chǎng)的Find N3折疊屏目前已經(jīng)正式入網(wǎng)，型號(hào)為PHN110。本次Find N3在外觀方面相比前兩代有很大的變化，不再是小號(hào)的橫向折疊屏，而是跟別的廠商一樣采用了較為常見的
得物提供大量商品買賣等服務(wù)，資金流轉(zhuǎn)量大，任何由于設(shè)計(jì)缺陷、系統(tǒng)缺陷、系統(tǒng)故障、人為操作、安全漏洞等因素都會(huì)引發(fā)直接或間接資金損失。資損防控就是在項(xiàng)目全生命周期內(nèi)，引入多種資金分析和控制手段，預(yù)防資損故障或控制資損故障影響范圍。
那么在日常工作中，具體如何開展呢？主要可以從以下三個(gè)方面來做：
在業(yè)務(wù)項(xiàng)目開始時(shí)，我們應(yīng)該評(píng)定項(xiàng)目資金風(fēng)險(xiǎn)等級(jí)，比如高風(fēng)險(xiǎn)需要重點(diǎn)關(guān)注&投入，中風(fēng)險(xiǎn)需要投入多少資源，低風(fēng)險(xiǎn)又如何保障。
在項(xiàng)目資金風(fēng)險(xiǎn)評(píng)定后，產(chǎn)品架構(gòu)設(shè)計(jì)時(shí)需要包括技術(shù)風(fēng)險(xiǎn)設(shè)計(jì)，比如冪等、分布式數(shù)據(jù)一致性、異地多活等。
然后對(duì)于高資金風(fēng)險(xiǎn)項(xiàng)目，我們需要出專門的資金風(fēng)險(xiǎn)系分，在得物重點(diǎn)關(guān)注資金流、信息流以及物流的流轉(zhuǎn)，比如業(yè)務(wù)的高保鏈路是怎么樣的，有哪些資損風(fēng)險(xiǎn)點(diǎn)等。
接下來就是對(duì)輸出的資損風(fēng)險(xiǎn)點(diǎn)進(jìn)行布防，布防的形式主要是核對(duì)和監(jiān)控，核對(duì)為主，監(jiān)控作為兜底，因?yàn)榍懊孑敵龅馁Y損風(fēng)險(xiǎn)點(diǎn)可能會(huì)有遺漏，監(jiān)控是業(yè)務(wù)異常的感知手段。日常我們也可以通過混沌工程進(jìn)行風(fēng)險(xiǎn)挖掘&核對(duì)規(guī)則驗(yàn)證。
最后我們需對(duì)資損風(fēng)險(xiǎn)告警進(jìn)行應(yīng)急，拉起應(yīng)急小組排查確認(rèn)風(fēng)險(xiǎn)并修復(fù)。
資損防控并不是靠某一個(gè)角色來承擔(dān)，而是需要架構(gòu)、研發(fā)、質(zhì)量和SRE一起來防控并嵌入日常工作流程中，從組織架構(gòu)視角，我們需要建立至少三道防線，即研發(fā)防線，質(zhì)量防線和SRE防線，相互兜底，合并共舉達(dá)到資損防控的目的。當(dāng)然各角色在項(xiàng)目各個(gè)階段各有側(cè)重，比如SRE負(fù)責(zé)業(yè)務(wù)線上穩(wěn)定性，那么線上的資損防控投入相對(duì)大一些。
從發(fā)現(xiàn)資損風(fēng)險(xiǎn)時(shí)效視角來說，可以分為實(shí)時(shí)核對(duì)（T+0）、近實(shí)時(shí)核對(duì)（T+M）、離線核對(duì)(T+H, T+1)，每種核對(duì)方式都有其適配的業(yè)務(wù)場(chǎng)景，并不存在替代之說，比如不落庫(kù)的配置變更適用實(shí)時(shí)核對(duì)，業(yè)務(wù)定時(shí)任務(wù)適用離線核對(duì)等等。實(shí)際業(yè)務(wù)場(chǎng)景布防時(shí)需分析業(yè)務(wù)特點(diǎn)，然后再使用合適的核對(duì)體系工具。在組織分工方面，研發(fā)側(cè)重離線核對(duì)，測(cè)試側(cè)重近實(shí)時(shí)核對(duì)，SRE側(cè)重實(shí)時(shí)核對(duì)，當(dāng)然實(shí)際工作中并不必這么界線分明，自己看到的風(fēng)險(xiǎn)點(diǎn)，可以選用合適的工具體系。
從核對(duì)是否影響業(yè)務(wù)運(yùn)行視角看，可以分為旁路核對(duì)和主路核對(duì)，旁路核對(duì)的結(jié)果對(duì)業(yè)務(wù)運(yùn)行不構(gòu)成影響，僅僅是風(fēng)險(xiǎn)揭示，而主路核對(duì)是有能力影響業(yè)務(wù)運(yùn)行的，比如資損熔斷用的就是主路核對(duì)技術(shù)，在核對(duì)告警報(bào)出后中斷業(yè)務(wù)運(yùn)行。目前公司已有的A、B平臺(tái)都屬于旁路核對(duì)體系。
在布防核對(duì)規(guī)則后，我們?cè)趺礄z驗(yàn)布防的有效性，同時(shí)因?yàn)闃I(yè)務(wù)迭代發(fā)展，早前布防的核對(duì)規(guī)則需要調(diào)整核對(duì)邏輯來適配新的業(yè)務(wù)邏輯，也就是說我們?nèi)绾伪ｕr核對(duì)規(guī)則？這就需要混沌工程資損演練來支撐了。資損演練又分為有損演練和無損演練，比如在線上搞有損演練時(shí)經(jīng)常把金額數(shù)據(jù)加/減0.01，檢驗(yàn)布防的核對(duì)規(guī)則是否發(fā)現(xiàn)，這樣即使發(fā)生了實(shí)際資損也在演練預(yù)算可以覆蓋的范圍內(nèi)，但在線上搞有損演練需謹(jǐn)慎評(píng)估影響范圍。資損防控?zé)o損演練關(guān)鍵在于生產(chǎn)庫(kù)的克隆，這樣在演練時(shí)做數(shù)據(jù)篡改并不影響線上業(yè)務(wù)運(yùn)行。
我們?cè)谧鲑Y損防控時(shí)，最重要的一步是風(fēng)險(xiǎn)識(shí)別，它是資損核對(duì)布防的源頭，可以這么說，如果沒有風(fēng)險(xiǎn)識(shí)別就沒有接下來核對(duì)布防。風(fēng)險(xiǎn)識(shí)別可以通過人工分析和智能系統(tǒng)推導(dǎo)兩種方式得到，從建設(shè)發(fā)展階段來說，人工分析通常是最開始采用的方式，在這個(gè)基礎(chǔ)上，再通過算法推導(dǎo)+專家經(jīng)驗(yàn)發(fā)展出智能系統(tǒng)推導(dǎo)。下面依人工分析視角來展開，這里舉例一個(gè)簡(jiǎn)化版得物系統(tǒng)的資損防控如何做。如下圖所示，左邊為商品交易業(yè)務(wù)鏈路，其中包括用戶下單交易和運(yùn)營(yíng)配置商品：
圖片
通過數(shù)據(jù)庫(kù)Binlog可以實(shí)現(xiàn)分鐘級(jí)的資損核對(duì)，這種核對(duì)方式對(duì)于業(yè)務(wù)上下游一致性風(fēng)險(xiǎn)有非常好的發(fā)現(xiàn)能力，日常配合混沌工程的無損演練能力，對(duì)于未覆蓋到資損風(fēng)險(xiǎn)也可以很好的揭示出來，所以T+M核對(duì)適用于涉數(shù)據(jù)庫(kù)字段的一致性風(fēng)險(xiǎn)、蓋帽等業(yè)務(wù)場(chǎng)景。
圖片
隨著業(yè)務(wù)的發(fā)展，對(duì)于資損核對(duì)也提出更高要求，我們需要發(fā)展出實(shí)時(shí)核對(duì)能力。比如可以通過業(yè)務(wù)插樁的方式來實(shí)現(xiàn)同步/異步觸發(fā)，同時(shí)實(shí)時(shí)監(jiān)聽業(yè)務(wù)執(zhí)行消息，然后數(shù)據(jù)路由至具體業(yè)務(wù)域執(zhí)行核對(duì)邏輯，這種核對(duì)方式屬資損防控領(lǐng)域的重武器，適用于業(yè)務(wù)型風(fēng)險(xiǎn)、配置型風(fēng)險(xiǎn)，同時(shí)滿足復(fù)雜業(yè)務(wù)核對(duì)場(chǎng)景。目前SRE已經(jīng)在建設(shè)T+0實(shí)時(shí)核對(duì)系統(tǒng)。
圖片
資損演練可以驗(yàn)證布防的核對(duì)規(guī)則有效性，又可以用來挖掘未覆蓋到資損風(fēng)險(xiǎn)，所以資損演練是資損防控體系很重要的一環(huán)。資金無損演練有以下三個(gè)關(guān)鍵點(diǎn)：
下圖為初步的資金無損演練方案：
圖片
作為支持得物業(yè)務(wù)的SRE主導(dǎo)了得物履約資金安全保障工作，由于得物履約的業(yè)務(wù)鏈路長(zhǎng)，風(fēng)險(xiǎn)敞口大，我們認(rèn)真考慮了業(yè)務(wù)穩(wěn)定性及其資損風(fēng)險(xiǎn)并實(shí)踐了前述的相關(guān)資損防控理念。
圖片
出價(jià)、下單、支付、發(fā)貨、結(jié)算、營(yíng)銷、逆向7個(gè)業(yè)務(wù)域定義出高保業(yè)務(wù)鏈路，輸出資損點(diǎn)、變更點(diǎn)、新增表及字段以及相關(guān)監(jiān)控點(diǎn)。
依托現(xiàn)有工具平臺(tái)進(jìn)行布防，成本最優(yōu)解。
圖片
資損防控通過核對(duì)規(guī)則落地，同時(shí)業(yè)務(wù)監(jiān)控配置告警規(guī)則，通過混沌工程演練驗(yàn)證規(guī)則有效性。
a. 應(yīng)急響應(yīng)
b. 自動(dòng)巡檢
i. 每天自動(dòng)巡檢重要指標(biāo)推送到對(duì)應(yīng)的工作群
a. 對(duì)相關(guān)規(guī)則進(jìn)行保鮮
b. 未暴露風(fēng)險(xiǎn)挖掘
a. 業(yè)務(wù)插樁先旁路核對(duì)，后可阻斷核對(duì)。
在得物落地資損防控期間，作為SRE一直在宣導(dǎo)的理念：資損防控需要研發(fā)、測(cè)試、SRE三方相互協(xié)作，三道防線相互兜底，合并共舉達(dá)到資損防控的目標(biāo)。未來，資損防控我們重點(diǎn)關(guān)注以下3個(gè)方面：
本文鏈接：http://m.www897cc.com/showinfo-26-6218-0.html資損防控技術(shù)體系簡(jiǎn)介及實(shí)踐
聲明：本網(wǎng)頁(yè)內(nèi)容旨在傳播知識(shí)，若有侵權(quán)等問題請(qǐng)及時(shí)與本網(wǎng)聯(lián)系，我們將在第一時(shí)間刪除處理。郵件：2376512515@qq.com
上一篇： DDD 與 CQRS 才是黃金組合
Copyright ? 2016-2023 天津谷騏科技有限公司 版權(quán)所有 sitemap.xml
違法及侵權(quán)請(qǐng)聯(lián)系：2376512515@qq.com 津ICP備18001702號(hào)
津公網(wǎng)安備 12010102000574號(hào)