佳木斯湛栽影视文化发展公司

主頁(yè) > 知識(shí)庫(kù) > Linux內(nèi)核實(shí)現(xiàn)多路鏡像流量聚合和復(fù)制的方法

Linux內(nèi)核實(shí)現(xiàn)多路鏡像流量聚合和復(fù)制的方法

熱門(mén)標(biāo)簽:百度競(jìng)價(jià)點(diǎn)擊價(jià)格的計(jì)算公式 電話機(jī)器人搭建 外呼系統(tǒng) 硅谷的囚徒呼叫中心 美團(tuán) 解決方案 家政服務(wù)網(wǎng)絡(luò) 服務(wù)器配置
我們?cè)谶M(jìn)行安全性監(jiān)控、測(cè)試的過(guò)程中,難免會(huì)遇到這樣的問(wèn)題:需要部署大量基于鏡像流量的安全設(shè)備,如IPS,異常流量,數(shù)據(jù)庫(kù)審計(jì),流量分析等,可是交換機(jī)上可以做鏡像流量的端口數(shù)量有限制,購(gòu)買(mǎi)專業(yè)的設(shè)備又太昂貴。

本文就針對(duì)此種情況,從Linux內(nèi)核模塊對(duì)網(wǎng)絡(luò)數(shù)據(jù)庫(kù)包進(jìn)行處理,解決上述問(wèn)題。

應(yīng)用場(chǎng)景

我們?cè)谶M(jìn)行安全性監(jiān)控、測(cè)試的過(guò)程中,難免會(huì)遇到這樣的問(wèn)題:需要部署大量基于鏡像流量的安全設(shè)備,如IPS,異常流量,數(shù)據(jù)庫(kù)審計(jì),流量分析等,可是交換機(jī)上可以做鏡像流量的端口數(shù)量有限制,購(gòu)買(mǎi)專業(yè)的設(shè)備又太昂貴。

本文就針對(duì)此種情況,從Linux內(nèi)核模塊對(duì)網(wǎng)絡(luò)數(shù)據(jù)庫(kù)包進(jìn)行處理,解決上述問(wèn)題。這里也感謝“白金PT”給予的幫助。

架構(gòu)設(shè)計(jì)

內(nèi)核模塊的流程比較簡(jiǎn)單,轉(zhuǎn)發(fā)配置從用戶態(tài)提交給內(nèi)核模塊,如”eth1@eth2_eth1@eth3_eth1/eth4@eth5“,這段的配置是:

來(lái)自eth1的流量,復(fù)制給eth2和eth3

來(lái)自eth1和eth4的流量,聚合給eth5

MIRROR內(nèi)核模塊中,只需要實(shí)現(xiàn)參數(shù)讀取,配置分析,網(wǎng)卡判斷(源,目的)即可。

算法、代碼實(shí)現(xiàn)

參數(shù)輸入

這段代碼的功能是,將前面提到的如“eth1@eth2_eth1@eth3_eth1/eth4@eth5“這樣的參數(shù),按照”_”進(jìn)行拆分,分段提交給參數(shù)設(shè)置函數(shù)”option_setup”

參數(shù)設(shè)置

這里我們把得到的參數(shù)”eth0@eth1”進(jìn)行進(jìn)一步的拆分,分出了源網(wǎng)卡eth0,目的網(wǎng)卡eth1,在內(nèi)核模塊的全局變量中,有一個(gè)結(jié)構(gòu)

”__read_mostly __u8 ethout_bits[MAX_OUT] ={0};“

用來(lái)存儲(chǔ)每個(gè)網(wǎng)卡對(duì)應(yīng)分發(fā)的網(wǎng)卡號(hào),可以這樣理解,如果服務(wù)器有8個(gè)網(wǎng)卡,那么每個(gè)網(wǎng)都會(huì)有一個(gè)8位的二進(jìn)制數(shù)來(lái)標(biāo)明它的轉(zhuǎn)發(fā),比如eth0復(fù)制到eth1,那么ethout_bits[0]就等于01000000,以此類推,如果我要把eth0復(fù)制到其他所有網(wǎng)卡,就會(huì)是01111111。

同時(shí)用一個(gè)全局的8字節(jié)變量,來(lái)存儲(chǔ)哪些網(wǎng)卡是鏡像流量口,防止多余的資源浪費(fèi)。

__read_mostly__u8 ifindex_bits = 0;

Skb包復(fù)制和轉(zhuǎn)發(fā)

當(dāng)Linux內(nèi)核收到一個(gè)skb結(jié)構(gòu)的數(shù)據(jù)包時(shí),判斷這個(gè)數(shù)據(jù)包是不是在轉(zhuǎn)發(fā)列表里,也就是網(wǎng)卡是不是鏡像源。

接著我用了一個(gè)循環(huán),來(lái)遍歷存儲(chǔ)的轉(zhuǎn)發(fā)目的網(wǎng)口,如果匹配的話,就使用skb_clone函數(shù)將數(shù)據(jù)包復(fù)制一份,然后通過(guò)dev_queue_xmit函數(shù)直接發(fā)送出去。

最后清理skb_buff結(jié)構(gòu)。

啟動(dòng)腳本

為了方便調(diào)試和快速提交參數(shù),可以使用如下的shell腳本:

實(shí)測(cè)效果

編譯,填充參數(shù)并執(zhí)行

執(zhí)行sh sh.sh

Dmesg輸出

鏡像流量效果

這里可以看到流量統(tǒng)計(jì)由于網(wǎng)卡速率,時(shí)間差等,并不會(huì)100%一樣,是正常的。

CPU占用

當(dāng)流量已經(jīng)達(dá)到400M左右的時(shí)候,CPU占用仍然比較低。

MIRROR.c源代碼與pdf格式下載

標(biāo)簽:韶關(guān) 防城港 臨沂 烏蘭察布 撫州 邢臺(tái) 南昌 北海

巨人網(wǎng)絡(luò)通訊聲明:本文標(biāo)題《Linux內(nèi)核實(shí)現(xiàn)多路鏡像流量聚合和復(fù)制的方法》,本文關(guān)鍵詞  ;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問(wèn)題,煩請(qǐng)?zhí)峁┫嚓P(guān)信息告之我們,我們將及時(shí)溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無(wú)關(guān)。
  • 相關(guān)文章
  • 收縮
    • 微信客服
    • 微信二維碼
    • 電話咨詢

    • 400-1100-266
    香河县| 台安县| 清河县| 旌德县| 汝州市| 长葛市| 璧山县| 洛隆县| 巴中市| 象州县| 静乐县| 玉溪市| 梁山县| 莫力| 漠河县| 和田市| 宁国市| 施秉县| 商洛市| 福建省| 嘉兴市| 化州市| 远安县| 察雅县| 巫山县| 江安县| 革吉县| 金堂县| 通城县| 封开县| 固安县| 潢川县| 厦门市| 游戏| 泸定县| 辉南县| 华亭县| 嘉荫县| 怀宁县| 老河口市| 黄大仙区|