上篇文章分享了搭建風(fēng)控體系在調(diào)研評(píng)估和埋點(diǎn)接入時(shí)所踩過(guò)的坑，這篇將繼續(xù)將筆者之前在搭建過(guò)程中踩過(guò)的坑分享給大家。

風(fēng)控流程方案設(shè)計(jì)會(huì)牽扯到多方系統(tǒng)，好的設(shè)計(jì)既考慮策略的優(yōu)、簡(jiǎn)、易，同時(shí)能兼顧于各系統(tǒng)的耦合，也是風(fēng)控的重要環(huán)節(jié)之一，在設(shè)計(jì)過(guò)程中，須清楚如下兩點(diǎn)：

1、大方向須結(jié)合自身“資源”

整個(gè)風(fēng)控體系搭建的方向是針對(duì)業(yè)務(wù)關(guān)注的某類或者某幾類風(fēng)險(xiǎn)，在搭建過(guò)程中一方面需要從黑產(chǎn)情報(bào)中獲知其目前掌握的攻擊技術(shù)、作案手段以及工具資源，另一方面需要掌握現(xiàn)有業(yè)務(wù)系統(tǒng)所能支撐的資源情況，比如運(yùn)營(yíng)資源、數(shù)據(jù)資源、處置資源等等。筆者之前參與的一個(gè)風(fēng)控設(shè)計(jì)項(xiàng)目因?yàn)闆]有深入了解業(yè)務(wù)側(cè)的實(shí)際資源情況，導(dǎo)致交稿方案中的名單落地因?yàn)闃I(yè)務(wù)方資源跟不上而被推翻。

每一個(gè)細(xì)節(jié)都務(wù)必與業(yè)務(wù)側(cè)以及開發(fā)側(cè)確認(rèn)！每一個(gè)細(xì)節(jié)都務(wù)必與業(yè)務(wù)側(cè)以及開發(fā)側(cè)確認(rèn)！每一個(gè)細(xì)節(jié)都務(wù)必與業(yè)務(wù)側(cè)以及開發(fā)側(cè)確認(rèn)！因?yàn)楣P者花費(fèi)最多時(shí)間的就在這個(gè)環(huán)節(jié)，所以重要的事情說(shuō)三遍。一個(gè)好的風(fēng)控體系可以理解為一個(gè)資源整合優(yōu)化的過(guò)程：全量的接入數(shù)據(jù)，經(jīng)過(guò)復(fù)雜運(yùn)算后，通過(guò)與各個(gè)系統(tǒng)間的耦合，將壞數(shù)據(jù)“篩選”出來(lái)。每一步都是環(huán)環(huán)相扣，承前啟后的，所以設(shè)計(jì)的時(shí)候要考慮好這一步與下一步的關(guān)聯(lián)以及對(duì)全局的影響。筆者曾經(jīng)在一個(gè)風(fēng)控項(xiàng)目中在業(yè)務(wù)響應(yīng)側(cè)就出現(xiàn)過(guò)一個(gè)問(wèn)題，由于沒有過(guò)細(xì)考慮過(guò)某些維度字段的實(shí)際落地細(xì)節(jié)問(wèn)題，導(dǎo)致開發(fā)在接入的過(guò)程中發(fā)現(xiàn)由于業(yè)務(wù)前端本身對(duì)接系統(tǒng)太多，無(wú)法采集到這個(gè)字段，最終導(dǎo)致該字段無(wú)法落地到名單標(biāo)簽中，最終導(dǎo)致閉環(huán)系統(tǒng)里里缺了這個(gè)字段，后面為了解決這個(gè)事情讓項(xiàng)目耽誤了一段時(shí)間。

在這個(gè)環(huán)節(jié)，業(yè)務(wù)方的開發(fā)人員已經(jīng)完成基本的數(shù)據(jù)采集以及接口開發(fā)工作，后面就進(jìn)入聯(lián)調(diào)校驗(yàn)階段，筆者的日常工作中需要使用風(fēng)控引擎對(duì)接各個(gè)業(yè)務(wù)系統(tǒng)，風(fēng)控引擎其本質(zhì)是將從各個(gè)業(yè)務(wù)端輸入進(jìn)來(lái)的數(shù)據(jù)，經(jīng)過(guò)各類數(shù)據(jù)分析計(jì)算，最終輸出風(fēng)控處置結(jié)果（如下圖）。由于業(yè)務(wù)線復(fù)雜多變，每一次的需求變動(dòng)，以及每個(gè)變量的修改/增減、規(guī)則調(diào)整、模型迭代優(yōu)化或者代碼的優(yōu)化，都有可能影響引擎性能，因此在每次搭建的測(cè)試聯(lián)調(diào)階段都需要確認(rèn)接入的數(shù)據(jù)是否滿足風(fēng)控需求。

在這個(gè)過(guò)程中，筆者之前踩過(guò)的坑有如下這些：

1、驗(yàn)證問(wèn)題

風(fēng)控測(cè)試驗(yàn)證不是說(shuō)通過(guò)業(yè)務(wù)方的測(cè)試傳入幾個(gè)必傳參數(shù)就完事了，這里面有兩點(diǎn)須確認(rèn)：數(shù)據(jù)、決策結(jié)果。

1.1、關(guān)于數(shù)據(jù)

如上圖所示，風(fēng)控接口一般會(huì)收到基礎(chǔ)用戶數(shù)據(jù)、業(yè)務(wù)參數(shù)數(shù)據(jù)、設(shè)備指紋采集數(shù)據(jù)、第三方的名單或者接口調(diào)用的數(shù)據(jù)，在這個(gè)環(huán)節(jié)需要確認(rèn)數(shù)據(jù)的準(zhǔn)確度與一致性。筆者之前經(jīng)常在這個(gè)環(huán)節(jié)遇到問(wèn)題，不同業(yè)務(wù)線的開發(fā)人員經(jīng)常會(huì)錯(cuò)誤理解采集點(diǎn)或者經(jīng)常丟失，導(dǎo)致返回的參數(shù)始終無(wú)法命中風(fēng)控策略，需要反復(fù)多次的聯(lián)調(diào)驗(yàn)證，因?yàn)檫@個(gè)環(huán)節(jié)的數(shù)據(jù)將決定生產(chǎn)環(huán)境的上線結(jié)果，因此這一步需要格外重視。此外，如果有客戶端測(cè)試環(huán)境，建議通過(guò)該環(huán)境的操作確認(rèn)風(fēng)控埋點(diǎn)位置是否都有采集，這一步做的目的也是為了精準(zhǔn)確認(rèn)數(shù)據(jù)的采集情況。

1.2、關(guān)于決策結(jié)果

如上圖所示，風(fēng)控引擎接收到測(cè)試數(shù)據(jù)后，通過(guò)模型及規(guī)則的一系列復(fù)雜計(jì)算，最終輸出決策結(jié)果，因?yàn)闆Q策引擎只輸出一個(gè)風(fēng)險(xiǎn)評(píng)價(jià)數(shù)據(jù)，真正影響到業(yè)務(wù)的是處置階段，這個(gè)環(huán)節(jié)重的點(diǎn)是驗(yàn)證決策結(jié)果的準(zhǔn)確度。決策結(jié)果的準(zhǔn)確度主要指按照約定好的模型和規(guī)則是否可以準(zhǔn)確響應(yīng)，反映準(zhǔn)確度的評(píng)價(jià)標(biāo)準(zhǔn)一般可包含覆蓋率、交叉率、誤傷率、準(zhǔn)確率、WOE、IV值、ROC、KS等，分析完成后，最后根據(jù)分析的測(cè)試結(jié)果，可輸出決策評(píng)估報(bào)告給業(yè)務(wù)方。筆者在這一步主要遇到的問(wèn)題是在做策略時(shí)沒有深入了解一線業(yè)務(wù)的真實(shí)情況，或者業(yè)務(wù)方自己也忽視了這些情況，這就導(dǎo)致經(jīng)常從數(shù)據(jù)分析角度看用戶是有問(wèn)題的，但實(shí)際上這些異常是有合理的業(yè)務(wù)解釋的，所以對(duì)于決策結(jié)果準(zhǔn)確度上，除了要具備嚴(yán)謹(jǐn)?shù)臄?shù)據(jù)分析能力以外，還需要緊密的業(yè)務(wù)合作。

2 、響應(yīng)問(wèn)題

這里筆者想講的響應(yīng)問(wèn)題包含兩點(diǎn)：性能響應(yīng)與業(yè)務(wù)響應(yīng)，前者是通過(guò)相關(guān)指標(biāo)的監(jiān)控驗(yàn)證系統(tǒng)間對(duì)接后的性能的響應(yīng)問(wèn)題，后者是通過(guò)客戶端的展示驗(yàn)證是否與背后的風(fēng)控處置結(jié)果一致。

2.1、關(guān)于性能響應(yīng)

業(yè)務(wù)側(cè)通常需要“零感知”的風(fēng)控效果，因此對(duì)風(fēng)控系統(tǒng)通常有明顯的調(diào)用時(shí)長(zhǎng)（RT）限制，此外，對(duì)于體量較大的業(yè)務(wù)方還會(huì)對(duì)QPS、TPS等有明確要求，因此在測(cè)試聯(lián)調(diào)階段，也需要考慮增加對(duì)此類指標(biāo)的監(jiān)控。筆者之前遇到的問(wèn)題主要來(lái)自于響應(yīng)時(shí)長(zhǎng)問(wèn)題，不同業(yè)務(wù)方對(duì)響應(yīng)時(shí)長(zhǎng)的級(jí)別不同，對(duì)于那些RT可以滿足的風(fēng)控接入，如果需要極短的響應(yīng)時(shí)間，可考慮使用輕量級(jí)的接入，因此在測(cè)試階段重點(diǎn)關(guān)注該數(shù)據(jù)是否達(dá)標(biāo)。如果RT不能滿足的風(fēng)控接入，可通過(guò)異步接口調(diào)用，同樣也要驗(yàn)證RT是否達(dá)標(biāo)。

2.2、關(guān)于業(yè)務(wù)響應(yīng)

風(fēng)控決策結(jié)果輸出之后，業(yè)務(wù)側(cè)需要按照預(yù)期設(shè)計(jì)好的邏輯響應(yīng)落地，在這個(gè)環(huán)節(jié)需要驗(yàn)證的是：每一個(gè)風(fēng)控結(jié)果的輸出都有對(duì)應(yīng)的業(yè)務(wù)處置落地，并且客戶端也有對(duì)應(yīng)的響應(yīng)話術(shù)，以及正確的事后閉環(huán) 。展開來(lái)說(shuō)，每個(gè)決策結(jié)果跟業(yè)務(wù)現(xiàn)有的處置手段都存在映射關(guān)系，不存在有冗余的決策結(jié)果或者處置手段，且每個(gè)處置手段都在客戶端有相應(yīng)的響應(yīng)動(dòng)作，最后，每個(gè)需要有處置手段的數(shù)據(jù)都可以將關(guān)鍵的風(fēng)控維度落地，并多次使用。筆者有一次因?yàn)樵谶@個(gè)環(huán)節(jié)因?yàn)槿狈?jīng)驗(yàn)，設(shè)計(jì)了繁冗復(fù)雜的落地方案，結(jié)果在測(cè)試驗(yàn)證的時(shí)候發(fā)現(xiàn)業(yè)務(wù)方并沒有做好客戶端的相關(guān)改造，結(jié)果導(dǎo)致在改造完成之前先用臨時(shí)的急救方案替代正式的方案。

好了，以上就是我在風(fēng)控領(lǐng)域搭建時(shí)遇到的坑以及總結(jié)的經(jīng)驗(yàn)，希望這些能夠幫助到大家今后的工作。