一種基于HTTP分析的URL自動(dòng)分類分級(jí)的系統(tǒng)及方法技術(shù)方案

本發(fā)明專利技術(shù)公開了一種基于HTTP分析的URL自動(dòng)分類分級(jí)的系統(tǒng)和方法，該系統(tǒng)包括用于分發(fā)HTTP請(qǐng)求/響應(yīng)報(bào)文鏡像數(shù)據(jù)流的HTTP請(qǐng)求/響應(yīng)報(bào)文預(yù)處理器、用于對(duì)HTTP請(qǐng)求報(bào)文鏡像數(shù)據(jù)流進(jìn)行重組的HTTP請(qǐng)求報(bào)文解析服務(wù)器、用于對(duì)HTTP響應(yīng)報(bào)文鏡像數(shù)據(jù)流進(jìn)行重組的HTTP響應(yīng)報(bào)文解析服務(wù)器、交換機(jī)、用于存儲(chǔ)報(bào)文信息的HTTP存儲(chǔ)關(guān)聯(lián)服務(wù)器和用于對(duì)URL進(jìn)行自動(dòng)分類分級(jí)的HTTP分級(jí)分類服務(wù)器。該方法包括以下步驟：預(yù)處理HTTP報(bào)文鏡像數(shù)據(jù)流得到HTTP請(qǐng)求/響應(yīng)報(bào)文鏡像數(shù)據(jù)流，并對(duì)其進(jìn)行分發(fā)；對(duì)請(qǐng)求/響應(yīng)報(bào)文鏡像數(shù)據(jù)流進(jìn)行重組，將從重組數(shù)據(jù)中提取到的報(bào)文信息存儲(chǔ)起來；對(duì)存儲(chǔ)的信息進(jìn)行關(guān)聯(lián)；根據(jù)關(guān)聯(lián)信息對(duì)URL分類分級(jí)。本發(fā)明專利技術(shù)能夠?qū)崿F(xiàn)對(duì)URL的高效的分類分級(jí)。

【技術(shù)實(shí)現(xiàn)步驟摘要】

【技術(shù)保護(hù)點(diǎn)】
一種基于HTTP分析的URL自動(dòng)分類分級(jí)系統(tǒng)，其特征在于，該系統(tǒng)包括HTTP請(qǐng)求/響應(yīng)報(bào)文預(yù)處理器、HTTP請(qǐng)求報(bào)文解析服務(wù)器、HTTP響應(yīng)報(bào)文解析服務(wù)器、交換機(jī)、HTTP存儲(chǔ)關(guān)聯(lián)服務(wù)器和HTTP分級(jí)分類服務(wù)器，其中：所述HTTP請(qǐng)求/響應(yīng)報(bào)文預(yù)處理器用于接收HTTP報(bào)文鏡像數(shù)據(jù)流并對(duì)其進(jìn)行預(yù)處理得到HTTP請(qǐng)求報(bào)文鏡像數(shù)據(jù)流和HTTP響應(yīng)報(bào)文鏡像數(shù)據(jù)流，并將所述HTTP請(qǐng)求報(bào)文鏡像數(shù)據(jù)流發(fā)給所述HTTP請(qǐng)求報(bào)文解析服務(wù)器，將HTTP響應(yīng)報(bào)文鏡像數(shù)據(jù)流發(fā)給所述HTTP響應(yīng)報(bào)文解析服務(wù)器；所述HTTP請(qǐng)求報(bào)文解析服務(wù)器與所述HTTP請(qǐng)求/響應(yīng)報(bào)文預(yù)處理器連接，用于對(duì)所接收的HTTP請(qǐng)求報(bào)文鏡像數(shù)據(jù)流進(jìn)行重組處理，從重組后的數(shù)據(jù)流中提取報(bào)文信息，并將所述報(bào)文信息以HTTP請(qǐng)求文件記錄的形式存儲(chǔ)到所述HTTP存儲(chǔ)關(guān)聯(lián)服務(wù)器上；所述HTTP響應(yīng)報(bào)文解析服務(wù)器與所述HTTP請(qǐng)求/響應(yīng)報(bào)文預(yù)處理器連接，用于對(duì)所接收的HTTP響應(yīng)報(bào)文鏡像數(shù)據(jù)流進(jìn)行重組處理，從重組后的數(shù)據(jù)流中提取報(bào)文信息，并將所述報(bào)文信息以HTTP響應(yīng)文件記錄的形式存儲(chǔ)到所述HTTP存儲(chǔ)關(guān)聯(lián)服務(wù)器上；所述交換機(jī)與HTTP請(qǐng)求/響應(yīng)報(bào)文預(yù)處理器、HTTP請(qǐng)求報(bào)文解析服務(wù)器、HTTP響應(yīng)報(bào)文解析服務(wù)器、HTTP存儲(chǔ)關(guān)聯(lián)服務(wù)器、HTTP分類分級(jí)服務(wù)器相連，用于對(duì)HTTP請(qǐng)求/響應(yīng)報(bào)文預(yù)處理器、HTTP請(qǐng)求報(bào)文解析服務(wù)器、HTTP響應(yīng)報(bào)文解析服務(wù)器及運(yùn)行其上的程序進(jìn)行遠(yuǎn)程配置管理，同時(shí)也作為HTTP請(qǐng)求報(bào)文解析服務(wù)器、HTTP響應(yīng)報(bào)文解析服務(wù)器、HTTP存儲(chǔ)關(guān)聯(lián)服務(wù)器、HTTP分類分級(jí)服務(wù)器之間的數(shù)據(jù)傳輸通道；所述HTTP存儲(chǔ)關(guān)聯(lián)服務(wù)器與所述交換機(jī)相連，用于根據(jù)所述報(bào)文信息中的五元組信息，將所述HTTP請(qǐng)求文件記錄與所述HTTP響應(yīng)文件記錄進(jìn)行關(guān)聯(lián)，并將關(guān)聯(lián)上的數(shù)據(jù)以記錄格式按行存入存儲(chǔ)文件；所述HTTP分類分級(jí)服務(wù)器與所述交換機(jī)相連，用于根據(jù)用戶定制的 策略，通過所述交換機(jī)訪問所述HTTP關(guān)聯(lián)存儲(chǔ)服務(wù)器中的記錄信息，對(duì)URL進(jìn)行分類分級(jí)。...

【技術(shù)特征摘要】

【專利技術(shù)屬性】
技術(shù)研發(fā)人員：何旭，李威，黃友俊，李星，吳建平，
申請(qǐng)(專利權(quán))人：賽爾網(wǎng)絡(luò)有限公司，
類型：發(fā)明
國(guó)別省市：