統一(yī)管理(lǐ)的(de)流量采集解決方案

【方案概述】

為(wèi)保證金(jīn)融業(yè)務能(néng)α↕<夠穩定運行(xíng)并提供增值服務，需要(yào)♥δ對(duì)金(jīn)融業(yè)務承載網（生(sσε£≤hēng)産網）進行(xíng)原始數(shù)據采集和(hé∏±Ω)業(yè)務數(shù)據分(fēn)析，這(↔‍♦zhè)些(xiē)網絡流量可(kě)視(shì)化(huà)分₹φ☆≠(fēn)析包括：網絡性能(néng)分(fēn)析、業(yè)務性能>¥€(néng)分(fēn)析、可(kě)靠性分(fēn)析、數(≥&shù)據庫審計(jì)等。通(tōng)過這(zhè)些(xiē)分(☆α∑$fēn)析工(gōng)具，金(jīn)融企業↓≤α(yè)可(kě)以實時(shí)獲取業(yè)務數(sh←¶φΩù)據、快(kuài)速定位網絡故障并随時(shí)回溯₩∑↕§分(fēn)析曆史數(shù)據。

進行(xíng)業(yè)務分(fēn)析的(de)基礎是(shì)原始×β& 數(shù)據報(bào)文(wén)捕"₽獲，通(tōng)常采用(yòng)端口↕♣β鏡像、分(fēn)光(guāng)、以太網TAP等方式進行(xín±β$g)數(shù)據流旁路(lù)監測，在傳統方案☆ε中，各分(fēn)析工(gōng)具都(dōu)需要(yào)從(cóng≠§∞)業(yè)務網中捕獲數(shù)據包，然後™→'再進行(xíng)解碼、合成、分(fēn)析和(hé)呈現(xiàn)。當✔÷€分(fēn)析工(gōng)具種類和(hé)數(shù)量≥₩÷較多(duō)時(shí)，會(huì)産生(shēng)性能§✘↕<(néng)、可(kě)靠性、可(kě)管理(lǐ)性能(néng)等諸多(d♣σuō)問(wèn)題，這(zhè)些(xiē)問(wèn)題一(<↔φ≠yī)方面會(huì)影(yǐng)響分(fēn)析工(gōng)具←♠♣★自(zì)身(shēn)的(de)性能(néng)和(hé)準确性，另一(©®πyī)方面也(yě)會(huì)對(duì)生(shēng)産網的(de)穩定‍σ運行(xíng)帶來(lái)隐患。

建設統一(yī)管理(lǐ)的(de)數(shù)據采集平台成為  ₹(wèi)目前主流的(de)解決方案，通(tōng)過統一(y≥¶$ī)的(de)網絡流量采集與分(fēn)配平台÷<∏ ，在生(shēng)産網與網絡流量可(kě)視(shì)化(huγ←☆÷à)分(fēn)析工(gōng)具之間(jiān)建立一(φ≥πyī)個(gè) “适配層”，通(tōng)過這(zhè)個(♦>gè)平台，可(kě)以實現(xiàn)如(rú)下(xià)特性☆ ∑×：

l  數(shù)據統一(yī)管理(lǐ)和(hé)調度，采ε↑集數(shù)據的(de)調整在平台內(nèi)進行(xíng)，不¶'(bù)影(yǐng)響生(shēng)産網。

l  鏡像采集數(shù)據可(kě)以經過複制(zh δ§ì)後分(fēn)配給多(duō)個(gè)分(fēn)析工(gōng)具，滿£Ωλ足各自(zì)不(bù)同的(de)采集需求。

l  實現(xiàn)采集流量彙聚，充分(fēn)利用(π≥πyòng)分(fēn)析工(gōng)具&δ←•的(de)處理(lǐ)性能(néng)，節約投資。

l  适配已有(yǒu)分(fēn)析工(gōng)具探針的(de)端口特性和(h£β>←é)處理(lǐ)性能(néng)，保護已有(yǒu)投資。

l  通(tōng)過流量過濾和(hé)數(shù)據包預處理(lǐ)，過濾'←特定流量，提高(gāo)分(fēn)析工(gōng)具探針的(de)處理( ¥lǐ)效率。

【主要(yào)功能(néng)】

l  流量複制(zhì)：将一(yī)份采集流量複制(→​zhì)多(duō)份後分(fēn)發給不(bù)同的(de€≠☆>)分(fēn)析工(gōng)具。

l  流量彙聚：将多(duō)個(gè)鏡像端口采集的(de)報(bào≠"σ)文(wén)流量彙聚後輸出，節約分(fēn)析工(gōng)具探針÷¥<。

l  流量過濾轉發：根據分(fēn)析工(gōng)具需要(yào)，将采集總流≈​→©量中關注的(de)業(yè)務流量過濾出來↔≥δ(lái)。

l  流量過濾丢棄：根據分(fēn)析工(gōng)具需要 γ(yào)，将采集總流量中不(bù)關注的(de)≈•↔業(yè)務流量丢棄掉。

l  源端口标識：在報(bào)文(wén)中★✘加入自(zì)定義标識，用(yòng)于網絡分(∞©fēn)析工(gōng)具的(de)故障定位。

l  負載均衡輸出：調整輸出端口的(de)數(shù)量和(hé)帶寬以π£→适配分(fēn)析工(gōng)具探針的γ←(de)性能(néng)上(shàng)限。

l  報(bào)文(wén)去(qù)重：自(z‍'ì)動對(duì)因為(wèi)重複采集的α'γ♣(de)數(shù)據報(bào)文(wén)進行(xíng)去(qù)重<∏處理(lǐ)，避免探針合成重複。

l  報(bào)文(wén)切片：截短(duǎn)報(bào)文(wén)的(dεβ¥e)Payload部分(fēn)，隻輸出報(bào)文(wé÷​n)頭部數(shù)據，減小(xiǎo)輸出流量。

l  報(bào)文(wén)去(qù)封裝：×'φδ對(duì)于各種複雜(zá)協議(yì)（如(rú)：MPLS、GR•×•‍E、VxLAN、VN tag等）封裝進行(xíng)識别并去β≥(qù)除頭部标簽後輸出。

l  隐私敏感數(shù)據處理(lǐ)：對(duì)​↔Ω 報(bào)文(wén)中包含的(de)關鍵字段（用(yòn∏♣→σg)戶名、密碼等）進行(xíng)掩碼加×α​擾處理(lǐ)，确保信息不(bù)洩露。

l  關鍵字過濾：根據報(bào)文(wén)Payload中所包含的(de)£‌特定關鍵字，選取過濾符合該特征的(de)報(bào)文(w≈ én)或會(huì)話(huà)。

l  SSL/TLS解密：對(duì)網絡中的(de)SSL/TLS報(bào)文(wén)（如☆✔ε<(rú)：https報(bào)文(wén)）進行(xíng)€♣¶♥解密輸出，便于分(fēn)析工(gōng)具對(duì)這(z™γ"hè)部分(fēn)流量進行(xíng)分(fēn)析。