日本一区免费看_中文字幕久久综合_精品国产日本_精品一区在线播放_亚洲欧美国产一区二区_欧美日韩在线播放一区二区_国产伦精品一区二区三区照片91_伊人天天久久大香线蕉av色_国产精成人品localhost_久久精品欧美

基于全局優(yōu)化支持向量機(jī)的多類(lèi)別高爐故障診斷

放大字體  縮小字體 發(fā)布日期:2017-12-19  作者:張海剛1,2) ,張森1,2) ,尹怡欣1,2)  瀏覽次數(shù):852
 
核心提示:摘 要 針對(duì)高爐故障診斷系統(tǒng)快速性和準(zhǔn)確性的要求,提出基于全局優(yōu)化最小二乘支持向量機(jī)的策略. 首先,采用變尺度離散粒子群對(duì)最小二乘支持向量機(jī)的參數(shù)和故障特征的選取進(jìn)行優(yōu)化; 然后,利用核主元分析法對(duì)選取的特征向量進(jìn)行壓縮整理; 最后,構(gòu)造了以Fisher 線性判別率為標(biāo)準(zhǔn)的啟發(fā)式糾錯(cuò)輸出編碼. 仿真結(jié)果表明,通過(guò)對(duì)故障訓(xùn)練樣本有意義地分割重組,用較少的最小二乘支持向量機(jī)分類(lèi)器,得到較高的故障判斷準(zhǔn)確率且增強(qiáng)了整個(gè)系統(tǒng)的實(shí)時(shí)性.
 基于全局優(yōu)化支持向量機(jī)的多類(lèi)別高爐故障診斷

張海剛1,2) ,張森1,2) ,尹怡欣1,2)

1) 北京科技大學(xué)自動(dòng)化學(xué)院,北京100083 2) 北京科技大學(xué)鋼鐵流程先進(jìn)控制教育部重點(diǎn)實(shí)驗(yàn)室,北京100083

   針對(duì)高爐故障診斷系統(tǒng)快速性和準(zhǔn)確性的要求,提出基于全局優(yōu)化最小二乘支持向量機(jī)的策略. 首先,采用變尺度離散粒子群對(duì)最小二乘支持向量機(jī)的參數(shù)和故障特征的選取進(jìn)行優(yōu)化; 然后,利用核主元分析法對(duì)選取的特征向量進(jìn)行壓縮整理; 最后,構(gòu)造了以Fisher 線性判別率為標(biāo)準(zhǔn)的啟發(fā)式糾錯(cuò)輸出編碼. 仿真結(jié)果表明,通過(guò)對(duì)故障訓(xùn)練樣本有意義地分割重組,用較少的最小二乘支持向量機(jī)分類(lèi)器,得到較高的故障判斷準(zhǔn)確率且增強(qiáng)了整個(gè)系統(tǒng)的實(shí)時(shí)性.

關(guān)    高爐; 故障診斷; 最小二乘分析; 支持向量機(jī); 全局優(yōu)化

鋼鐵工業(yè)是我國(guó)國(guó)民經(jīng)濟(jì)的基礎(chǔ)產(chǎn)業(yè)和支柱產(chǎn)業(yè)[1]. 高爐煉鐵在鋼鐵工業(yè)中處于舉足輕重的地位.高爐煉鐵系統(tǒng)生產(chǎn)設(shè)備繁多,具有多耦合、大延時(shí)、非線性等特點(diǎn). 盡管在高爐本體上安裝了很多自動(dòng)化的檢測(cè)裝置,然而由于高爐運(yùn)行爐況復(fù)雜,無(wú)法建立準(zhǔn)確的機(jī)理模型,在高爐自動(dòng)控制決策過(guò)程中,仍將其當(dāng)為“黑箱”系統(tǒng)進(jìn)行處理. 高爐生產(chǎn)追求穩(wěn)定,穩(wěn)定爐況不僅能夠保證鐵水質(zhì)量,而且能夠提高煤氣利用率,達(dá)到節(jié)能減排的目的. 高爐爐況故障診斷在高爐自動(dòng)化控制的研究中一直是熱點(diǎn)話題,準(zhǔn)確及時(shí)的故障診斷技術(shù)能夠確定高爐的穩(wěn)定生產(chǎn),降低故障所帶來(lái)的經(jīng)濟(jì)損失[2]

在高爐生產(chǎn)中,由于缺少準(zhǔn)確的機(jī)理模型,往往從數(shù)據(jù)驅(qū)動(dòng)角度建立高爐故障診斷模型[3]. 基于專(zhuān)家系統(tǒng)的故障診斷方法,計(jì)算機(jī)模仿專(zhuān)家經(jīng)驗(yàn),進(jìn)行故障決策[4]. 雖然引進(jìn)國(guó)外的專(zhuān)家系統(tǒng)有一定的效果,但是其價(jià)格昂貴,并且國(guó)內(nèi)大多數(shù)高爐檢測(cè)設(shè)備落后,操作管理水平低,造成重要參數(shù)的數(shù)據(jù)不完整,不準(zhǔn)確,導(dǎo)致國(guó)外專(zhuān)家系統(tǒng)難以適合我國(guó)國(guó)情. 文獻(xiàn)[5]基于人工神經(jīng)網(wǎng)絡(luò)建立了高爐故障診斷模型,取得了不錯(cuò)的效果. 但由于其建立在大數(shù)定理的漸近理論之上,要求學(xué)習(xí)樣本足夠多,收斂速度比較慢且容易陷入局部極值或過(guò)學(xué)習(xí)的困境,在實(shí)際應(yīng)用中隱含層的層數(shù)及每層神經(jīng)元數(shù)目如何確定也無(wú)規(guī)律可循. 李振[6]將貝葉斯技術(shù)運(yùn)用到高爐故障診斷中,設(shè)計(jì)了因果關(guān)系貝葉斯網(wǎng)絡(luò)診斷模型. 然而高爐的智能故障診斷面臨的是典型故障樣本少、特征參數(shù)呈非線性耦合且維數(shù)較高的模式識(shí)別難題,所建立的貝葉斯模型往往達(dá)不到期望的精度. 除此之外,高爐處于復(fù)雜的工業(yè)生產(chǎn)環(huán)境中,樣本數(shù)據(jù)往往受到噪聲干擾,這要求故障診斷算法有很強(qiáng)的魯棒性. 高爐故障具有不同的形式,屬于多分類(lèi)問(wèn)題,設(shè)計(jì)合理有效的故障檢測(cè)分類(lèi)器至關(guān)重要. 同時(shí)高爐生產(chǎn)對(duì)于故障檢測(cè)的及時(shí)性也有一定的要求[5],及時(shí)準(zhǔn)確的進(jìn)行故障檢測(cè)報(bào)警,不僅能夠減少損失,而且能夠保證高爐順行,延長(zhǎng)高爐壽命.

本文針對(duì)冶煉過(guò)程中出現(xiàn)的懸料、崩料和管道行程三種典型故障,提出基于全局優(yōu)化支持向量機(jī)的多類(lèi)別高爐故障診斷方法. 一方面,在智能故障診斷系統(tǒng)的構(gòu)建過(guò)程中,為了降低特征空間的維數(shù),減少存儲(chǔ)空間的占用,提高機(jī)器學(xué)習(xí)的效率,需要對(duì)高爐的故障特征參數(shù)進(jìn)行自動(dòng)的篩選. 在數(shù)據(jù)預(yù)處理階段,我們采用核主成分分析( kernel principal component analysis,KPCA) 方法對(duì)高爐故障特征數(shù)據(jù)進(jìn)行降維處理,保留和高爐故障關(guān)聯(lián)性較高的特征數(shù)據(jù),提高檢測(cè)準(zhǔn)確率. 另外核函數(shù)的參數(shù)選擇和支持向量機(jī)的懲罰因子影響著故障診斷系統(tǒng)的訓(xùn)練效果,為了避免人為設(shè)定參數(shù)的弊端,需要系統(tǒng)自發(fā)地對(duì)參數(shù)的最優(yōu)值進(jìn)行尋找. 本文在粒子群算法[7]的基礎(chǔ)上,提出變尺度離散粒子群參數(shù)優(yōu)化方法,通過(guò)加強(qiáng)最優(yōu)粒子的影響力,增強(qiáng)了系統(tǒng)的穩(wěn)定性. 另一方面,高爐故障診斷本質(zhì)上是多類(lèi)別分類(lèi)問(wèn)題,而支持向量機(jī)是針對(duì)二元分類(lèi)問(wèn)題的學(xué)習(xí)方法,通常的處理方式是將復(fù)雜的多元分類(lèi)問(wèn)題分解為多個(gè)簡(jiǎn)單的二元分類(lèi)問(wèn)題. 糾錯(cuò)輸出編碼是一種分解重組多元分類(lèi)問(wèn)題的通用方法,其中一對(duì)多、密集隨機(jī)編碼法與一對(duì)一、稀疏隨機(jī)編碼法分別是經(jīng)典的二元和三元編碼方法的實(shí)例[7]. 然而,以上方法的編碼矩陣是預(yù)先定義好的,在編碼矩陣的創(chuàng)建過(guò)程中,沒(méi)有考慮到訓(xùn)練樣本的數(shù)據(jù)特征,使得訓(xùn)練過(guò)程具有一定的盲目性. 本文采用以Fisher 線性判別率為標(biāo)準(zhǔn)的啟發(fā)式糾錯(cuò)輸出編碼,該方法具有兩個(gè)方面的優(yōu)勢(shì): 首先,啟發(fā)式的編碼過(guò)程允許類(lèi)集合按照最大的判別率重新組織,從而使編碼矩陣的拓?fù)浣Y(jié)構(gòu)同一對(duì)一和一對(duì)多方法固定的方式相比變得更加靈活. 其次,與隨機(jī)策略需要大量的分類(lèi)器相比,有意義的重組顯著減少了分類(lèi)器的數(shù)量,從而得到較好的性能且提高了訓(xùn)練的速度.

我們首先詳細(xì)介紹本文提出的全局優(yōu)化最小二乘支持向量機(jī)分類(lèi)算法,其次我們建立高爐智能故障診斷模型,最后展示基于真實(shí)生產(chǎn)數(shù)據(jù)的故障仿真結(jié)果.

1   基于全局優(yōu)化最小二乘支持向量機(jī)的多類(lèi)別分類(lèi)方法

1. 1 最小二乘支持向量機(jī)

支持向量機(jī)( SVM) 能較好地解決小樣本、非線性以及高維數(shù)的模式識(shí)別問(wèn)題. 支持向量機(jī)通過(guò)結(jié)構(gòu)風(fēng)險(xiǎn)最小化原理來(lái)提高泛化能力,可以用于解決二元分類(lèi)問(wèn)題,已在模式識(shí)別、信號(hào)處理和函數(shù)逼近領(lǐng)域得到應(yīng)用[8--9]. 最小二乘支持向量機(jī)( least-squares supportvector machine,LS-SVM) 是Suykens 和Vandewalle[8]在Vapnik 的標(biāo)準(zhǔn)支持向量機(jī)的基礎(chǔ)上提出的一種改進(jìn)方法. 最小二乘支持向量機(jī)在優(yōu)化問(wèn)題中引入誤差的平方項(xiàng),用等式約束取代原先支持向量機(jī)的不等式約束條件,將耗時(shí)的二次規(guī)劃問(wèn)題轉(zhuǎn)化為線性方程組的求解,大幅度地簡(jiǎn)化了訓(xùn)練過(guò)程.

給定具有N 個(gè)n 維樣本向量的訓(xùn)練集T = { ( x1,y1) ,( x2,y2) ,…,( xN,yN) } ,其中xk∈Rn 是第k 個(gè)輸入向量,yk∈Y = { 1,- 1} 是第k 個(gè)輸入向量在二元分類(lèi)問(wèn)題中的類(lèi)標(biāo)簽. 當(dāng)樣本在輸入空間不能被線性分開(kāi)時(shí),選擇一個(gè)非線性映射Φ(·) : Rn→H,把樣本向量從輸入空間Rn 映射到特征空間H. 當(dāng)在特征空間H 構(gòu)建最優(yōu)超平面時(shí),訓(xùn)練算法只需要計(jì)算該空間向量間的內(nèi)積,即Φ( xi) Φ( xj) ,通過(guò)引入核函數(shù)κ( xi,xj) = Φ( xi) Φ( xj) ,使得高維空間的內(nèi)積運(yùn)算轉(zhuǎn)化為原始輸入空間核函數(shù)的計(jì)算. 支持向量分類(lèi)機(jī)的目標(biāo)是在特征空間中構(gòu)建最優(yōu)線性決策函數(shù):

QQ截圖20171218162447 

其中,Φ(·) 是從輸入向量到高維特征空間的非線性映射,ω 是最優(yōu)分類(lèi)超平面的法向量,b 為偏移量.

假設(shè)訓(xùn)練集在特征空間中是線性可分的,最優(yōu)分類(lèi)超平面應(yīng)滿足如下條件:

QQ截圖20171218162542 

當(dāng)訓(xùn)練集在特征空間中為線性不可分時(shí),任何分類(lèi)超平面都必然有錯(cuò)誤的劃分,因此不能要求所有訓(xùn)練點(diǎn)均滿足約束條件( 2) . 為此,對(duì)第個(gè)訓(xùn)練點(diǎn)( xk,yk) 引入松弛變量ξk≥0,把約束條件放寬為:

QQ截圖20171218162633 

ξ = ( ξ1,ξ2,…,ξN) 體現(xiàn)了訓(xùn)練集被錯(cuò)分的情況,而由ξ可以構(gòu)造出表述訓(xùn)練集被錯(cuò)劃的程度. 根據(jù)結(jié)構(gòu)風(fēng)險(xiǎn)最小化原則,最小二乘支持向量機(jī)在目標(biāo)函數(shù)中選取ξ2 作為損失函數(shù),尋找最優(yōu)超平面的問(wèn)題轉(zhuǎn)化為下列二次規(guī)劃問(wèn)題

QQ截圖20171218162724 

其中,c 是為了均衡目標(biāo)函數(shù)所引進(jìn)的懲罰系數(shù). 求解式( 4) ,需引入Lagrangian 函數(shù)L( ω,b,ξ; αk) 即

QQ截圖20171218162832 

其中αk為L(zhǎng)agrangian 乘子. 根據(jù)Karush--Kuhn--Tucker( KKT) 優(yōu)化條件[10]可得

QQ截圖20171218162914 

引入某個(gè)核函數(shù)κ(·) 后,最優(yōu)化問(wèn)題最終轉(zhuǎn)化成式( 7) 線性方程組的求解

QQ截圖20171218162947 

解方程組得到最優(yōu)解α* = ( α*1,α*2,…,α*N) 和b* 得到?jīng)Q策函數(shù)

QQ截圖20171218163043 

1. 2 Fisher 線性判別糾錯(cuò)輸出編碼

高爐故障形式多樣,不同故障有不同的表現(xiàn)形式.在本文中,我們考慮三種高爐典型故障形式: 懸料、崩料和管道行程,是一種多分類(lèi)問(wèn)題. 在實(shí)際的應(yīng)用過(guò)程中,支持向量機(jī)被證明是強(qiáng)有力的二元分類(lèi)方法[11]. 然而,當(dāng)需要處理多元分類(lèi)問(wèn)題時(shí),支持向量機(jī)不能直接用來(lái)處理這種信息. 在支持向量機(jī)算法處理多分類(lèi)問(wèn)題中,往往將多元分類(lèi)問(wèn)題轉(zhuǎn)化為一對(duì)多的二元分類(lèi)問(wèn)題. 然而這種轉(zhuǎn)化往往會(huì)增加分類(lèi)器的個(gè)數(shù),增加訓(xùn)練時(shí)間. 在這一小節(jié)中,我們介紹Fisher線性判別糾錯(cuò)輸出編碼,并將其應(yīng)用到高爐的多故障識(shí)別算法中.

1. 2. 1 糾錯(cuò)輸出編碼

糾錯(cuò)輸出編碼( error correcting output codes,ECOC) 是處理多元分類(lèi)問(wèn)題的通用框架,它能夠通過(guò)編碼減少數(shù)據(jù)樣本維數(shù),提高樣本質(zhì)量,從而可以保證采用較少的支持向量機(jī)分類(lèi)器建立故障診斷模型,解決支持向量機(jī)多元分類(lèi)問(wèn)題[12]. 總體來(lái)講,可以把糾錯(cuò)輸出編碼方法分解為兩個(gè)不同的階段: 編碼和解碼.在編碼階段,對(duì)于一組給定類(lèi)別的訓(xùn)練樣本集合,為每個(gè)類(lèi)別設(shè)計(jì)一套單獨(dú)的碼字( 代表每個(gè)類(lèi)的編碼的比特序列) ,碼字的每個(gè)位置標(biāo)示了某一類(lèi)的訓(xùn)練樣本在相應(yīng)的二元分類(lèi)器中的標(biāo)簽歸屬. 在解碼階段,尋找與實(shí)驗(yàn)樣本分類(lèi)結(jié)果最匹配的碼字,指定輸入向量的類(lèi)別標(biāo)簽,從而得到最終的分類(lèi)決策. 通過(guò)拆分重組原始的類(lèi)別集合并且將二元分類(lèi)方法嵌入以實(shí)際問(wèn)題為導(dǎo)向的糾錯(cuò)編碼設(shè)計(jì)過(guò)程,有效的解決了復(fù)雜的多分類(lèi)問(wèn)題.

在編碼步驟中,對(duì)于給定的待學(xué)習(xí)的N 類(lèi)樣本集合,在為每個(gè)類(lèi)分配一行獨(dú)一無(wú)二的長(zhǎng)度為n 的碼字時(shí),形成了n 個(gè)不同的二元分類(lèi)問(wèn)題. 碼字的每個(gè)比特位根據(jù)某類(lèi)訓(xùn)練樣本集在相應(yīng)二元分類(lèi)器的歸屬,被編碼為+ 1( 正例) 或者- 1( 負(fù)例) . 將碼字按照矩陣的行向量排列起來(lái),可以得到一個(gè)二元的N × n 編碼矩陣M,其中Mij∈{ - 1,+ 1} . 在此基礎(chǔ)上,Allwein等[13]在編碼過(guò)程中引入了0 符號(hào),這意味著在某些分類(lèi)器中某些類(lèi)的樣本是不被考慮的,通過(guò)忽略這些類(lèi)的樣本對(duì)分類(lèi)器的影響,三元的糾錯(cuò)輸出編碼結(jié)構(gòu)豐富了類(lèi)別劃分的多樣性,最后得到三元編碼矩陣M,其中Mij∈{ - 1,0,+ 1} .

在解碼步驟中,應(yīng)用n 個(gè)二元分類(lèi)器,可以得到每個(gè)測(cè)試樣本長(zhǎng)度為n 的輸出編碼,根據(jù)輸出編碼與各個(gè)碼字之間的距離測(cè)度可以決定其類(lèi)別的歸屬. 常用的距離測(cè)度是漢明距離,對(duì)于任意的測(cè)試樣本的分類(lèi)結(jié)果可以用如下公式表示

QQ截圖20171218163302 

其中,f j( x) 表示測(cè)試樣本在第j 個(gè)分類(lèi)器中的分類(lèi)結(jié)果[14]

為了尋找碼字長(zhǎng)度簡(jiǎn)短并具有高分辨力的編碼矩陣,總體的算法描述如下:

第一步,創(chuàng)建列向量編碼二叉樹(shù),利用以Fisher 線性判別率為標(biāo)準(zhǔn)的浮動(dòng)搜索法,遞歸地尋找第k 個(gè)父節(jié)點(diǎn)的類(lèi)集合Sk中具有最大判別率的兩個(gè)分區(qū){ φ1k,φ2k} .

第二步,根據(jù)得到的分割結(jié)果{ φ1k,φ2k} 為編碼矩陣M 的第k 列賦值.

其中,第一步創(chuàng)建了列向量編碼二叉樹(shù). 表1 描述了創(chuàng)建列向量編碼二叉樹(shù)的算法. 每一個(gè)樹(shù)節(jié)點(diǎn)定義了一個(gè)類(lèi)集合分割的問(wèn)題,每個(gè)節(jié)點(diǎn)的分割必須滿足使判別率最大化的條件. 通過(guò)最大化數(shù)據(jù)x 和為分割結(jié)果所創(chuàng)建的類(lèi)標(biāo)簽d 之間的交互信息可以得到最終的列代碼. 算法中d 是一個(gè)離散的隨機(jī)變量,因此給定類(lèi)集合Sk的一個(gè)分割結(jié)果{ φ1k,φ2k} = BP( Sk) ,d按如下形式定義:

QQ截圖20171218163548 

QQ截圖20171218163611 

將二叉樹(shù)視為尋找碼字的手段,第二步是填充糾錯(cuò)輸出編碼矩陣的過(guò)程. 利用除了葉節(jié)點(diǎn)外的每個(gè)根節(jié)點(diǎn)得到的列代碼,組成了編碼矩陣M. 列代碼作為矩陣M 的列向量依次排列. 為了創(chuàng)建每一個(gè)列代碼,可以使用父節(jié)點(diǎn)和子節(jié)點(diǎn)的關(guān)系進(jìn)行描述. 對(duì)于給定的類(lèi)Cr和節(jié)點(diǎn)k 的類(lèi)集合k: { φ1k∪φ2k} ,其中φ1k和φ2k分別是節(jié)點(diǎn)k 的子節(jié)點(diǎn),矩陣M 按如下方式填充:

QQ截圖20171218163710 

注意到列的數(shù)量n 和內(nèi)部節(jié)點(diǎn)的數(shù)量一致. 容易得出,在任何的二叉樹(shù)中,如果葉節(jié)點(diǎn)的數(shù)量是Nc,內(nèi)部節(jié)點(diǎn)的數(shù)量是Nc - 1,因此可以確定碼字的長(zhǎng)度是Nc - 1.

圖 1 展示了一個(gè)八元分類(lèi)問(wèn)題列向量編碼二叉樹(shù)構(gòu)造的過(guò)程.

QQ截圖20171218163922 

圖2 顯示了判別糾錯(cuò)輸出編碼矩陣的結(jié)果. 其中白色的方格表示相應(yīng)的位置被編碼為+ 1,黑色的方格表示- 1,灰色的方格表示0. 因此,C6類(lèi)的碼字是{ 1,0,- 1,0- 1,0,1} . 編碼矩陣的第i 列定義了一個(gè)二元分類(lèi)問(wèn)題,將相應(yīng)的二元分類(lèi)器hi進(jìn)行訓(xùn)練. 例如,分類(lèi)器h5區(qū)分{ C5,C6} 和{ C2} .

QQ截圖20171218163957 

1. 2. 2 Fisher 線性判別浮動(dòng)搜索法

在本小節(jié),我們?cè)O(shè)計(jì)了一種Fisher 線性判別率為標(biāo)準(zhǔn)的啟發(fā)式糾錯(cuò)輸出編碼,并將其運(yùn)用到判別糾錯(cuò)輸出編碼算法中. 該算法能夠利用較少的支持向量機(jī)分類(lèi)器,實(shí)現(xiàn)高爐故障的多分類(lèi)問(wèn)題.

回顧表1 中描述的算法,為了將類(lèi)集合分割成兩個(gè)部分,需要一個(gè)最大化判別率的過(guò)程. 但是,最好的分割子集需要在所有可能的分割中無(wú)遺漏的尋找,由于這種方法是不切實(shí)際的,所以必須使用一種次優(yōu)的策略. 浮動(dòng)搜索方法是一種次優(yōu)的順序搜索方法,能夠緩解窮舉搜索法在進(jìn)行分割選擇時(shí),產(chǎn)生的高額計(jì)算代價(jià). 而且,這種方法允許搜索方向是變化的,從而解決了許多順序搜索方法的主要限制.

表2 中的方法為順序前向浮動(dòng)搜索法( sequentialfloating forward selection,SFFS) . 這種方法以空的類(lèi)集合X0開(kāi)始并在新集合的判別率增加時(shí)被逐漸填充.在填充階段,對(duì)于類(lèi)集合Xk最有意義的類(lèi)被納入進(jìn)來(lái). 在條件排除步驟,如果判別率繼續(xù)增長(zhǎng)則最差的類(lèi)被移除.

QQ截圖20171218170153 

為了避免高維空間龐大的計(jì)算量,選擇Fisher 線性判別率作為分割類(lèi)集合的標(biāo)準(zhǔn). 假設(shè)C1和C2是二分類(lèi)問(wèn)題的兩個(gè)類(lèi). 定義Fisher 線性判別率為

QQ截圖20171218170242 

式中m1和m2是樣本的均值,s1和s2是C1和C2各自的方差. 定義類(lèi)內(nèi)散射矩陣Sω和類(lèi)間散射矩陣Sb為:

QQ截圖20171218170341 

根據(jù)上面的結(jié)果,J( ω) 可以被寫(xiě)成

QQ截圖20171218170423 

類(lèi)間散射矩陣Sω可以被看作是一個(gè)類(lèi)的密度指標(biāo).并且,類(lèi)間散射矩陣Sb可以被看作是一個(gè)類(lèi)的位置指標(biāo). 因此,可以定義判別率

QQ截圖20171218170501 

1. 3 變尺度離散粒子群

高爐生產(chǎn)環(huán)境復(fù)雜,生產(chǎn)數(shù)據(jù)往往遭到工業(yè)噪聲的干擾,這對(duì)于故障識(shí)別算法有強(qiáng)魯棒性的要求. 另外,高爐運(yùn)行狀態(tài)繁多,各種爐況之間相互轉(zhuǎn)化,設(shè)計(jì)穩(wěn)定可靠的故障分類(lèi)器至關(guān)重要. 最小二乘支持向量機(jī)分類(lèi)算法中學(xué)習(xí)參數(shù)的選擇,對(duì)于故障分類(lèi)精度影響嚴(yán)重. 合適的學(xué)習(xí)參數(shù)不僅能夠提高分類(lèi)器的故障識(shí)別精度,而且能夠保證分類(lèi)器穩(wěn)定運(yùn)行,滿足高爐生產(chǎn)的需求. 在此我們采用粒子群算法( particle swarmoptimization,PSO) 對(duì)于最小二乘支持向量機(jī)分類(lèi)器的學(xué)習(xí)參數(shù)進(jìn)行優(yōu)化. 粒子群算法起源于對(duì)鳥(niǎo)群尋找食物行為的模仿[15]. 標(biāo)準(zhǔn)粒子群優(yōu)化算法主要針對(duì)連續(xù)參數(shù)進(jìn)行搜索運(yùn)算,但高爐全局參數(shù)優(yōu)化是離散的組合優(yōu)化問(wèn)題,為此需采用離散粒子群優(yōu)化算法.

假設(shè)一個(gè)由m 個(gè)粒子組成的群體在D 維的搜索空間以一定的速度飛行,粒子i 在第t 次迭代中的狀態(tài)屬性設(shè)置如下: xi = ( xi1,xi2,…,xiD) ,xid∈[Ld,Ud]為第i 個(gè)粒子( i = 1,2,…,m,d = 1,2,…,D) 的維位置矢量,L d和Ud分別為搜索空間的下限和上限,根據(jù)適應(yīng)度函數(shù)計(jì)算xi當(dāng)前的適應(yīng)值,即可衡量粒子位置的優(yōu)劣; vi = ( vi1,vi2,…,viD) ,vid∈[vmin,vmax]為i 粒子的的飛行速度,即粒子移動(dòng)的距離,v min和vmax分別為最小和最大速度; pi = ( pi1,pi2,…,piD) 為粒子自身迄今為止搜索到的最優(yōu)位置; pg = ( pg1,…,p gD) 為整個(gè)粒子群迄今為止搜索到的最優(yōu)位置. 對(duì)于離散組合優(yōu)化問(wèn)題,粒子在每一個(gè)維度均被限定為0 或1,更新粒子的位置意味著改變某一位的狀態(tài)為0 或1,對(duì)于速度矢量,其相應(yīng)位表示的是xid取0 或1 的概率,在每次迭代中,粒子根據(jù)以下等式更新速度和位置:

QQ截圖20171218171028 

式中: t 是迭代次數(shù); r1、r2和ρ 為[0,1]之間的隨機(jī)數(shù),用于保持群體的多樣性; c1和c2為學(xué)習(xí)因子,使粒子具有自我總結(jié)和向群體中優(yōu)秀個(gè)體學(xué)習(xí)的能力,從而向自己的歷史最優(yōu)點(diǎn)以及群體內(nèi)歷史最優(yōu)點(diǎn)靠近,通常取c1 = c2 = 2; w 為慣性權(quán)重,其大小決定了粒子對(duì)當(dāng)前速度繼承的多少,選擇一個(gè)合適的w 有助于粒子群算法均衡它的探索能力與開(kāi)發(fā)能力; sigmoid 數(shù)是常用的一種模糊函數(shù),其表達(dá)式為

QQ截圖20171218171122 

在離散粒子群優(yōu)化方法( discrete particle swarmoptimization,DSPO) 中,每個(gè)粒子平等的更新,忽視了最優(yōu)粒子的優(yōu)勢(shì). 在現(xiàn)實(shí)世界中,大多數(shù)社會(huì)性動(dòng)物都存在等級(jí)現(xiàn)象,最好的個(gè)體往往享受著某些特權(quán).因此根據(jù)粒子的表現(xiàn)好壞,應(yīng)采用不同的進(jìn)化策略.

首先,運(yùn)用式( 18) 計(jì)算概率向量,即probid = Sid .然后,根據(jù)如下原則更新粒子的概率向量,位置矢量和速度矢量: ( 1) 對(duì)于獲勝的粒子,根據(jù)式( 16) 和式( 17)分別更新其概率向量,位置矢量和速度矢量; ( 2) 對(duì)于失敗粒子,速度矢量和位置矢量按如下等式更新.

QQ截圖20171218171211 

式中,Hf是層次因子,η 為[0,1]之間的隨機(jī)數(shù).

為了克服粒子過(guò)早成熟,在離散粒子群優(yōu)化方法中引入突變因素. 隨著迭代次數(shù)增加時(shí),最優(yōu)的結(jié)果沒(méi)有得到改善,將執(zhí)行突變操作.

QQ截圖20171218171305 

式中,pm是突變概率,ξ 是[0,1]之間的隨機(jī)數(shù).

2   高爐智能故障診斷模型

本文依據(jù)高爐冶煉原理和在長(zhǎng)期生產(chǎn)實(shí)踐中積累的故障征兆描述,結(jié)合寶鋼2500 m3高爐自身先進(jìn)檢測(cè)技術(shù)的優(yōu)勢(shì),對(duì)冶煉過(guò)程中出現(xiàn)的懸料、崩料和管道行程三種典型故障進(jìn)行診斷分析.

在進(jìn)行故障分析時(shí),為了更好地反映真實(shí)的爐況狀態(tài),不能僅僅依賴高爐現(xiàn)場(chǎng)數(shù)據(jù)的瞬時(shí)值,而是要考慮一段時(shí)間內(nèi)數(shù)據(jù)的整體特征. 寶鋼現(xiàn)場(chǎng)數(shù)據(jù)采集系統(tǒng)采樣間隔為1 s,依據(jù)懸料、崩料和管道行程故障出現(xiàn)時(shí)在一段時(shí)間內(nèi)產(chǎn)生的異常現(xiàn)象,以900 個(gè)采樣點(diǎn)為周期,計(jì)算數(shù)據(jù)的均值、方差和變化率,最終確定爐況診斷系統(tǒng)的特征參數(shù)向量為F = ( GQ,CQ,HP,TP,ΔP,K) ,其中GQ 為煤氣流量,CQ 為冷風(fēng)流量,HP 為熱風(fēng)壓力,TP 為爐頂壓力,ΔP 為壓差,K 為透氣性指數(shù),各參數(shù)都由樣本均值、方差和變化率組成.

先進(jìn)的檢測(cè)技術(shù)為故障診斷帶來(lái)更多的信息支持,寶鋼2500 m3高爐在爐頂不同的位置安裝有六個(gè)微波雷達(dá),用于測(cè)量當(dāng)前料面上六個(gè)不同位置的料線深度,雷達(dá)數(shù)據(jù)能夠反映徑向料面和料速變化的規(guī)律.在爐喉斜橋方向開(kāi)始沿圓周每隔90° 安裝一根測(cè)溫梁,其上共有17 個(gè)十字測(cè)溫點(diǎn),能自動(dòng)連續(xù)地測(cè)出爐喉徑向溫度,根據(jù)溫度變化,能判斷煤氣流在爐喉的徑向分布. 在應(yīng)用改進(jìn)的均值濾波方法去除六點(diǎn)雷達(dá)數(shù)據(jù)的噪聲并采用二維滑動(dòng)多項(xiàng)式曲面擬合對(duì)徑向的十字測(cè)溫?cái)?shù)據(jù)進(jìn)行預(yù)處理[16],最終得到爐況診斷系統(tǒng)的環(huán)境信息向量為E = ( Rad1,Rad2,…,Rad6,CT,RT,ΔT) ,其中Radi,i=1,2,…,6 為六點(diǎn)雷達(dá)各自的波動(dòng)值,CT 為中心點(diǎn)溫度均值,RT 為邊沿溫度均值,ΔT 為邊沿中心溫度差. 綜合上述參數(shù)集,形成最終的高爐診斷輸入向量IN = ( F,E) . 高爐智能故障診斷流程如圖3 所示.

QQ截圖20171218171547 

由于生產(chǎn)環(huán)境和檢測(cè)手段的限制,采樣數(shù)據(jù)往往變得極其復(fù)雜、混亂和冗余. 未經(jīng)預(yù)處理的采樣數(shù)據(jù)會(huì)導(dǎo)致所提取的特征參數(shù)受到不同程度的噪聲污染,從而影響診斷推理的精度. 由于特征參數(shù)選擇的隨意性且數(shù)量眾多,構(gòu)成樣本向量的不同特征參數(shù)之間常常具有一定的非線性相關(guān)性,大量的數(shù)據(jù)不但占用巨大的存儲(chǔ)空間和計(jì)算時(shí)間,加重了診斷推理機(jī)的負(fù)擔(dān),降低了系統(tǒng)的實(shí)時(shí)性,而且有用的知識(shí)往往會(huì)淹沒(méi)在大量的冗余數(shù)據(jù)中. 為了分析重要的特征,抑制無(wú)用的信息,需要進(jìn)行特征提?。?本文選用核主元分析法[17]對(duì)數(shù)據(jù)進(jìn)行壓縮和信息抽取,可以有效地找出數(shù)據(jù)中最主要的元素和結(jié)構(gòu),能夠消除特征參數(shù)間的冗余以及噪聲對(duì)特征參數(shù)的干擾,將原有的復(fù)雜數(shù)據(jù)降維,把眾多指標(biāo)轉(zhuǎn)化為少數(shù)幾個(gè)綜合指標(biāo),同時(shí)保留甚至強(qiáng)化了該數(shù)據(jù)的主要特征,揭示了隱藏在復(fù)雜數(shù)據(jù)背后的簡(jiǎn)單結(jié)構(gòu),從而使數(shù)據(jù)更容易處理.

在整個(gè)診斷系統(tǒng)中,假設(shè)c = ( c1,c2,…,c n) 是n 個(gè)最小二乘支持向量機(jī)二元分類(lèi)器的懲罰系數(shù),c i被限定在{ 20,21,…,210 } ; σ = ( σ1,σ2,…,σn,σKPCA) 是n +1 個(gè)徑向基核函數(shù)的寬度參數(shù),σi被限定在{ 2 - 3,2- 2,…,25 } ; f = { f1,f2,…,fm} 是m 個(gè)特征參數(shù)的特征選擇集,f i = 1 表示第i 個(gè)參數(shù)被選中,fi = 0 表示第i 個(gè)參數(shù)未被選中. 組合上述參數(shù)集,形成一個(gè)混合向量H= ( c,σ,f) ,需運(yùn)用變尺度離散粒子群優(yōu)化方法對(duì)其進(jìn)行優(yōu)化.

適應(yīng)度函數(shù)是系統(tǒng)總體表現(xiàn)的衡量標(biāo)準(zhǔn),根據(jù)系統(tǒng)的訓(xùn)練準(zhǔn)確率、支持向量的數(shù)量和參數(shù)選擇的個(gè)數(shù)評(píng)判每個(gè)粒子表現(xiàn)的優(yōu)劣. 現(xiàn)設(shè)定如下形式的適應(yīng)度函數(shù):

QQ截圖20171218171844 

式中,f ( Atest - n) 表示對(duì)訓(xùn)練集的數(shù)據(jù)運(yùn)用n 重交叉檢驗(yàn)的平均正確率,QQ截圖20171218171941表示支持向量在所有訓(xùn)練樣本中占的比例,QQ截圖20171218172003表示選中的特征參數(shù)在所有參數(shù)中占的比例.

3   實(shí)驗(yàn)仿真

為了檢驗(yàn)本文提出的基于全局優(yōu)化支持向量機(jī)的多類(lèi)別故障診斷方法,選取寶鋼高爐生產(chǎn)過(guò)程中具有代表性的500 組爐況數(shù)據(jù),其中正常爐況數(shù)據(jù)200 組,懸料、崩料和管道行程異常爐況各100 組,利用其中400 組數(shù)據(jù)作為訓(xùn)練樣本,剩余100 組作為測(cè)試樣本.

在故障檢測(cè)模型中,我們提取高爐特征數(shù)據(jù)IN =( F,E) . 該特征數(shù)據(jù)含有15 維特征,采用核主成分分析方法對(duì)其進(jìn)行降維處理. 圖4 展示了核主成分分析方法的仿真結(jié)果圖. 從圖中可以看到每個(gè)主元所代表數(shù)據(jù)特征的比重. 我們提取前三個(gè)主元所代表的特征數(shù)據(jù)作為模型的輸入. 前三個(gè)主元代表了95. 5%的特征屬性,能夠滿足模型的要求.

QQ截圖20171218172103 

設(shè)置變尺度離散粒子群優(yōu)化方法最大迭代次數(shù)為300 次,最小二乘支持向量機(jī)分類(lèi)器的懲罰因子c =( c1,c2,c3) 和徑向基核函數(shù)的寬度參數(shù)σ = ( σ1,σ2,σ3,σKPCA) 的自尋優(yōu)過(guò)程分別如圖5 和圖6 所示.

QQ截圖20171218172220QQ截圖20171218172227 

由圖5 和圖6 可以看出變尺度離散粒子群優(yōu)化方法在粒子尋優(yōu)的初期具有極大的搜索范圍,粒子的變異性能夠有效地防止粒子陷入局部極值,在搜索的后期,該算法能夠在小范圍內(nèi)對(duì)最優(yōu)值進(jìn)行調(diào)整,最終得到的最優(yōu)參數(shù)如表3 所示.

QQ截圖20171218172309 

進(jìn)一步,對(duì)高爐故障訓(xùn)練樣本采用Fisher 線性判別糾錯(cuò)輸出編碼法得到編碼矩陣,如表4 所示.

QQ截圖20171218172340 

在測(cè)試階段,本文將基于參數(shù)優(yōu)化的糾錯(cuò)輸出編碼多類(lèi)別故障診斷方法與傳統(tǒng)的無(wú)參數(shù)優(yōu)化( c = 10,σ = 0. 4) 的一對(duì)一、一對(duì)多、密集隨機(jī)編碼和稀疏隨機(jī)編碼四種方法進(jìn)行對(duì)比,進(jìn)行1000 次實(shí)驗(yàn)后得到平均結(jié)果如表5 所示.

QQ截圖20171218172414 

由表5 可以看出故障樣本經(jīng)過(guò)特征參數(shù)的篩選和壓縮之后,顯著降低了樣本的維數(shù)且提高了樣本的質(zhì)量,減輕了最小二乘支持向量機(jī)分類(lèi)器的運(yùn)算負(fù)擔(dān),增強(qiáng)了系統(tǒng)的分類(lèi)性能. 與其他四種方法相比糾錯(cuò)輸出編碼方法提供了最為緊湊的編碼,碼字長(zhǎng)度代表著采用最小二乘支持向量機(jī)分類(lèi)器的個(gè)數(shù). 通過(guò)表5 可以看出,通過(guò)糾錯(cuò)輸出編碼后,我們采用三個(gè)最小二乘支持向量機(jī)的分類(lèi)器就可以實(shí)現(xiàn)高爐故障的識(shí)別. 相比于其他算法,分類(lèi)器的個(gè)數(shù)得到了很好的抑制,降低了故障識(shí)別時(shí)間. 利用Fisher 判別率對(duì)類(lèi)集合的重新整合,幫助分類(lèi)器得到了較高的準(zhǔn)確率. 就系統(tǒng)的復(fù)雜性而言,一對(duì)多方法與糾錯(cuò)輸出編碼法最為接近,但是前者的準(zhǔn)確率卻是較低的,因?yàn)檫@種方法容易受到不同類(lèi)別訓(xùn)練樣本數(shù)量不均衡的影響. 雖然隨機(jī)編碼方法也得到了可以接受的效果. 但是,由于它們需要構(gòu)造的分類(lèi)器數(shù)量過(guò)多,嚴(yán)重影響了系統(tǒng)的實(shí)時(shí)性,不利于高爐生產(chǎn)現(xiàn)場(chǎng)爐況的在線監(jiān)測(cè). 相比而言,一對(duì)一方法得到了與糾錯(cuò)輸出編碼相近的分類(lèi)結(jié)果,并且其編碼構(gòu)造方式固定,構(gòu)造過(guò)程簡(jiǎn)單,可以作為一種備用的高爐故障診斷系統(tǒng)的編碼選擇.

4   結(jié)論

本文針對(duì)特定高爐選取與典型故障密切相關(guān)的特征統(tǒng)計(jì)參數(shù),從數(shù)據(jù)預(yù)處理和參數(shù)優(yōu)化兩個(gè)方面著手,應(yīng)用變尺度離散粒子群優(yōu)化方法提升了最小二乘支持向量機(jī)二元分類(lèi)器的整體性能,進(jìn)而通過(guò)啟發(fā)式的糾錯(cuò)輸出編碼設(shè)計(jì),將二元分類(lèi)器推廣至多元故障分類(lèi),使用較少的分類(lèi)器,在提升系統(tǒng)實(shí)時(shí)性的同時(shí)得到了良好的診斷效果,為高爐故障的在線監(jiān)控提出了一種可行的方法.

   獻(xiàn)

[1] Liang J B. The Blast Furnace Condition Diagnosis System Designand Implementation based on the Gas Flow Rate [Dissertation].Changsha: Central South University,2009

( 梁劍波. 基于煤氣流量的高爐爐況診斷系統(tǒng)設(shè)計(jì)及實(shí)現(xiàn)[學(xué)位論文]. 長(zhǎng)沙: 中南大學(xué),2009)

[2] Li Q H. Fuzzy Identification Prediction and Control to B. F IronmakingProcess [Dissertation]. Zhejiang: Zhejiang University,2005

( 李啟會(huì). 高爐冶煉過(guò)程的模糊辨識(shí)、預(yù)測(cè)與控制[學(xué)位論文]. 浙江: 浙江大學(xué),2005)

[3] Gao C H,Jian L,Chen J M,et al. Data-driven modeling andpredictive algorithm for complex blast furnace ironmaking process.Acta Autom Sin,2009,35( 6) : 725

( 郜傳厚,漸令,陳積明,等. 復(fù)雜高爐煉鐵過(guò)程的數(shù)據(jù)驅(qū)動(dòng)建模及預(yù)測(cè)算法. 自動(dòng)化學(xué)報(bào),2009,35( 6) : 725)

[4] Liu L M,Wang A N,Sha M,et al. Fault diagnostics of blast furnacebased on CLS--SVM / / 2010 Chinese Conference on PatternRecognition. IEEE,2010

[5] Yang J,Xu Q,Yu C B,et. al. Study on fault diagnosis of blastfurnace based on ICA--QNN / / Proceedings of the 29th ChineseControl Conference. Beijing,2010: 4014

( 楊佳,許強(qiáng),余成波,等. 基于ICA--QNN 的高爐故障診斷研究/ / 第29 屆中國(guó)控制會(huì)議. 北京,2010: 4014)

[6] Li Z. Research of Blast Furnace Fault Diagnosis based on BayesianNetworks [Dissertation]. Wuhan: Wuhan University of Scienceand Technology,2015

( 李振. 基于貝葉斯網(wǎng)絡(luò)( Bayesian Networks) 方法的高爐故障診斷研究[學(xué)位論文]. 武漢: 武漢科技大學(xué),2015)

[7] Pujol O,Radeva P,Vitria J. Discriminant ECOC: a heuristicmethod for application dependent design of error correcting outputcodes. IEEE Trans Pattern Anal Mach Intell,2006,28( 6) : 1007

[8] Suykens J A K,Vandewalle J. Least squares support vector machineclassifiers. Neural Process Lett,1999,9( 3) : 293

[9] Xu M,Wang S T,Gu X. TL--SVM: A transfer learning algorithm.Control Decis,2014,29( 1) : 141

( 許敏,王士同,顧鑫. TL--SVM: 一種遷移學(xué)習(xí)新算法. 控制與決策,2014,29( 1) : 141)

[10] Gestel T V,Suykens J A K,Lanckriet G,et al. Multiclass LS--SVMs: moderated outputs and coding-decoding schemes. NeuralProcess Lett,2002,15( 1) : 45

[11] Liu L M,Wang A N,Sha M,et. al. Multi-class classificationmethods of cost-conscious LS--SVM for fault diagnosis of blastfurnace. J Iron Steel Res Int,2011,18( 10) : 17

[12] Qiu M H,Wang Z Y,An G,et al. Diagnosis of gear fault basedon KPCA and ECOC--SVM. J Vib Shock,2009,28( 5) : 1

( 邱綿浩,王自營(yíng),安鋼,等. 基于核主元分析與糾錯(cuò)輸出編碼SVM 的齒輪故障診斷. 振動(dòng)與沖擊,2009,28( 5) : 1)

[13] Allwein E,Schapire R,Singer Y. Reducing multiclass to binary:a unifying approach for margin classifiers. Mach Learn Res,2002,12( 1) : 113

[14] Zhou J D,Wang X D,Cui Y H,et al. Error-correcting outputcodes based on evidence theory for multi-class classification.Control Decis,2013,28( 4) : 495

( 周進(jìn)登,王曉丹,崔永花,等. 基于證據(jù)理論的糾錯(cuò)輸出編碼解決多類(lèi)分類(lèi)問(wèn)題. 控制與決策,2013,28( 4) : 495)

[15] Ji Z,Liao H L,Wu Q H. Particle Swarm Optimization Algorithmand Its Application. Beijing: Science Press,2009

( 紀(jì)震,廖惠連,吳青華. 粒子群算法及應(yīng)用. 1 版. 北京:科學(xué)出版社,2009)

[16] Hao Y. Study on Radar and Cross Temperature Data Processingin Blast Furnace [Dissertation]. Beijing: University of Scienceand Technology Beijing,2012

( 郝宇. 高爐雷達(dá)及十字測(cè)溫?cái)?shù)據(jù)處理算法研究[學(xué)位論文]. 北京: 北京科技大學(xué),2012)

[17] Cao L J,Chua K S,Chong W K,et al. A comparison of PCA,KPCA and ICA for dimensionality reduction in support vector machine.Neurocomputing,2003,55( 1-2) : 321

 
 
[ 技術(shù)文獻(xiàn)搜索 ]  [ 加入收藏 ]  [ 告訴好友 ]  [ 打印本文 ]  [ 關(guān)閉窗口 ]

 

 
?
 
關(guān)于我們 聯(lián)系方式 付款方式 電子期刊 會(huì)員服務(wù) 版權(quán)聲明 冀ICP備13016017號(hào)-1
 
日本一区免费看_中文字幕久久综合_精品国产日本_精品一区在线播放_亚洲欧美国产一区二区_欧美日韩在线播放一区二区_国产伦精品一区二区三区照片91_伊人天天久久大香线蕉av色_国产精成人品localhost_久久精品欧美
91中文字精品一区二区| 亚洲va久久久噜噜噜久久狠狠| 精品91免费| 日韩国产欧美精品| 久久精品magnetxturnbtih| 久久av一区二区三区漫画| 欧美精品一区二区三区在线四季| 一区二区三区三区在线| 精品国产91亚洲一区二区三区www| 欧美不卡在线一区二区三区| 成人资源视频网站免费| 亚洲精品视频一区二区三区| 免费一区二区三区在在线视频| 成人在线看片| 在线视频不卡一区二区三区| 久久综合给合久久狠狠色| 亚洲欧美日韩不卡一区二区三区| 日本视频一区二区在线观看| 精品欧美日韩| 极品日韩久久| 欧美精品成人一区二区在线观看| 在线观看日本一区| 3d动漫精品啪啪一区二区三区免费| 色中色综合成人| 成人18视频| 国产私拍一区| 国产精品久久久久久久久久久久冷| 91中文字精品一区二区| 鲁鲁狠狠狠7777一区二区| 欧美精品一区二区三区在线四季| 日韩免费一区二区三区| 99中文视频在线| 91亚洲精品丁香在线观看| 伊人久久99| 国产一区二区精品免费| 97中文在线观看| 一区视频二区视频| 国产欧美亚洲日本| 一本一道久久a久久精品综合| 亚洲巨乳在线观看| 久久av一区二区三区漫画| 一区二区冒白浆视频| 精品亚洲一区二区三区四区五区高| caoporn国产精品免费公开| 日韩精品久久一区二区三区| 玖玖玖精品中文字幕| 麻豆91av| 亚洲精品一区二区三区四区五区| 97在线资源站| 成人免费视频网站入口| 蜜桃av久久久亚洲精品| 国产综合 伊人色| 欧美一区视久久| 91精品国产高清久久久久久91裸体| 成人免费在线一区二区三区| 久久亚洲国产精品日日av夜夜| 亚洲一区在线直播| 欧美日韩免费观看一区| 日本精品一区| 91传媒免费看| 中文字幕欧美日韩一区二区| 欧美婷婷久久| 999精品视频一区二区三区| 国产一区在线观| 日韩av一区二区三区在线| 懂色一区二区三区av片| 久久精品日产第一区二区三区| 亚洲高清视频一区二区| 999精品在线观看| 视频一区二区三区在线观看| 一区二区三区四区欧美| 国产一级精品aaaaa看| 98国产高清一区| 精品无人乱码一区二区三区的优势| 中文字幕剧情在线观看一区| 成人动漫在线观看视频| 成人免费在线看片| www日韩av| 椎名由奈jux491在线播放| 97人人模人人爽人人少妇| 国内视频一区二区| 国精产品99永久一区一区| 国产一区二区三区四区五区在线| 91偷拍精品一区二区三区| 精品免费一区二区三区蜜桃| 国产精品日韩欧美一区二区三区| 国产女人水真多18毛片18精品| 久久一区二区三区av| 日本一区视频在线观看| 国产精品yjizz| 成人动漫在线观看视频| 国产精品视频免费一区| 中文网丁香综合网| 日韩aⅴ视频一区二区三区| 国产精品国产三级国产专区53| 奇米888一区二区三区| 欧美二区三区| 亚洲欧美日韩国产yyy| 自拍亚洲欧美老师丝袜| 成人在线看片| 欧美专区一二三| 97av影视网在线观看| 亚洲三区视频| 91精品国产综合久久久久久丝袜| 色一情一区二区三区四区| 中文字幕久久一区| 超碰在线97av| 性欧美videosex高清少妇| 国产日本一区二区三区| 青青草成人激情在线| 亚洲欧洲一区二区| 99理论电影网| 高清国语自产拍免费一区二区三区| 艳色歌舞团一区二区三区| 欧美人与物videos另类| 蜜桃91精品入口| 国产亚洲自拍偷拍| 国产精品国产一区二区| 欧美大香线蕉线伊人久久国产精品| 午夜精品视频在线观看一区二区| 三区精品视频观看| 激情伦成人综合小说| 久久综合入口| 国产伦视频一区二区三区| 国产精品一区二区你懂得| 性欧美.com| 久久精品第九区免费观看| 精品在线一区| 蜜桃臀一区二区三区| 亚洲精品日韩在线观看| 日韩高清专区| 日韩欧美精品一区二区| 五月天丁香综合久久国产| 好吊色欧美一区二区三区四区| 含羞草久久爱69一区| 日韩三级电影| 欧美高清视频一区| 亚洲色图自拍| 亚洲ai欧洲av| 国产在线精品一区二区三区》| 天堂一区二区三区| 日韩欧美亚洲v片| 国产伦精品一区二区三区免费视频| 日韩欧美激情一区二区| 久久久久久九九| 日韩免费一区二区三区| 资源网第一页久久久| 视频一区二区三区在线观看| 欧美一区二区三区四区五区六区| 蜜桃臀一区二区三区| 日本一区不卡| 日本一区二区在线视频观看| 99国内精品久久久久久久软件| 国产精品一区二区三区精品| 一区二区三区国| 在线一区日本视频| 亚洲精品日韩精品| 亚洲一区二区三区欧美| 久久天堂国产精品| 亚洲一区免费看| 久久精品国产美女| 国产在线播放一区二区| 狼狼综合久久久久综合网| 色综合影院在线观看| 翔田千里亚洲一二三区| 波多野结衣精品久久| av成人午夜| 在线亚洲美日韩| 蜜桃av色综合| 成人欧美一区二区三区黑人免费| 欧美日韩精品免费看| 鲁片一区二区三区| 99热最新在线| 国产在线精品一区二区中文| av日韩免费电影| 一本色道久久综合亚洲二区三区| 亚洲黄色一区二区三区| av成人在线电影| 亚洲精品一区二区三区四区五区| 欧美日韩综合网| 特级西西444www大精品视频| 国产精品一区在线观看| 999精品视频一区二区三区| 欧美日韩精品免费在线观看视频| 国产精品一区视频| 久久精品女人的天堂av| 日韩视频在线播放| 一本一道久久a久久精品综合| 日本免费高清不卡| 久久精品午夜一区二区福利| 日本午夜精品一区二区| 97人人模人人爽人人喊38tv| 欧美色图亚洲自拍| 国产午夜精品在线| 精品视频高清无人区区二区三区| 亚洲精品一区二区三区四区五区| 国产精品18毛片一区二区| 久久精品国产一区二区三区日韩| 亚洲啪啪av| 97久久天天综合色天天综合色hd| 4444kk亚洲人成电影在线| 久久精品人人做人人爽电影| 99中文字幕| 茄子视频成人在线观看| 日韩午夜视频在线观看| 五月天亚洲综合情| 国产在线欧美日韩| 五月天久久狠狠| 蜜桃成人在线| 日韩精品久久久免费观看| 国产精品一区视频网站| 午夜欧美性电影| 久久视频在线观看中文字幕| 国产精品久久久久久久小唯西川| 99久久精品久久久久久ai换脸| 午夜精品短视频| 日本一区二区精品视频| www.成人av.com| 亚洲精品中文字幕乱码三区不卡| 成人黄动漫网站免费| 亚州欧美一区三区三区在线| 黄色99视频| 亚洲欧美一区二区原创| 你懂的网址一区二区三区| 亚洲精品久久久久久一区二区| 亚洲精品在线免费| 日韩国产一区久久| 5g影院天天爽成人免费下载| 欧美一区二区三区电影在线观看| 久久手机视频| 亚洲开发第一视频在线播放| 国产伦精品一区二区三区高清| 51国偷自产一区二区三区的来源| 福利视频久久| 久久精彩视频| 欧美二区三区在线| 日韩国产精品一区二区三区| 欧美激情论坛| 亚洲永久一区二区三区在线| 欧美日韩视频在线一区二区观看视频| 欧美黑人3p| 亚洲欧洲精品一区二区三区波多野1战4| 欧美一区二视频在线免费观看| 国产女主播一区二区| 精品无人区一区二区三区| 在线不卡视频一区二区| 久久人人爽爽人人爽人人片av| 国产区二精品视| 翡翠波斯猫1977年美国| 国产精品一区二区三区四区五区| 日本在线视频不卡| 成人在线观看av| 一区二区在线观看网站| 九九九九久久久久| 99热最新在线| 欧美一区二区在线视频观看| av免费观看久久| 国产麻豆乱码精品一区二区三区| 在线看成人av电影| 国产精品制服诱惑| 91久久偷偷做嫩草影院| 国产自产精品| 日本一区二区三区免费观看| 女女同性女同一区二区三区91| 亚洲国产一区二区在线| 欧美国产一二三区| 欧美激情专区| 色视频一区二区三区| 国产精品视频免费一区二区三区| 一区二区三区在线视频111| 在线丝袜欧美日韩制服| 日韩欧美第二区在线观看| 综合色婷婷一区二区亚洲欧美国产| 午夜精品视频在线观看一区二区| 自拍偷拍99| 久久久久久九九| 久久综合给合久久狠狠色| 亚洲一区高清| 在线观看精品视频| 日本高清一区| 一道精品一区二区三区| 麻豆av一区二区三区| 欧美一区二区三区电影在线观看| 2019国产精品视频| 69174成人网| 国产精品三区四区| 欧美人与性禽动交精品| 日本中文不卡| 成人蜜桃视频| 亚洲一区二区不卡视频| 国产亚洲情侣一区二区无| 欧美亚洲另类在线一区二区三区| 久久久神马电影| 日韩电影免费观看在| 丝袜足脚交91精品| 国产福利不卡| 精品999在线观看| 久久国产精品久久| 噜噜噜噜噜久久久久久91| 日韩少妇中文字幕| 国产成人一区二区三区免费看| 久久精品久久精品国产大片| 国产在线精品日韩| 91精品国产91久久久久青草| 影音欧美亚洲| 国产自产在线视频一区| 亚洲一卡二卡三卡四卡无卡网站在线看| 日韩视频精品| 精品在线观看一区二区| 国产精品一区二区欧美| 自拍亚洲欧美老师丝袜| 亚洲一区二区三区乱码| 鬼打鬼之黄金道士1992林正英| 亚洲永久一区二区三区在线| 热re99久久精品国99热蜜月| 久久国产精品高清| 久久视频在线观看中文字幕| 中文视频一区视频二区视频三区| 国产精品久久久久久免费观看| 国产高清在线一区| 欧洲一区二区在线| 色综合久久av| 成人免费看片网站| 国产精品日韩一区二区三区| 日本一区精品| 色噜噜色狠狠狠狠狠综合色一| 精品国产一区二区三区日日嗨| 国产日韩一区二区三区| 国产精品久久九九| 日韩电影免费观看在| 国产日韩一区欧美| 欧美日韩精品免费在线观看视频| 蜜桃在线一区二区三区精品| 日本黄网免费一区二区精品| 99r国产精品视频| 亚洲自拍偷拍二区| 国产精品一区二区在线观看| 午夜精品美女久久久久av福利| 日本一区二区三区四区高清视频| 波多野结衣久草一区| 亚洲欧美久久久久一区二区三区| 91在线精品观看| 国产精品久久久久久久久久久久冷| 日韩亚洲一区在线播放| 欧洲在线视频一区| 91精品国产一区二区三区动漫| 99国产在线观看| 国产一区免费在线观看| 久久久7777| y111111国产精品久久婷婷| 好吊色欧美一区二区三区视频| 国产乱码精品一区二区三区日韩精品| 精品亚洲第一| www国产亚洲精品| 日韩精品极品视频在线观看免费| 天天爽天天狠久久久| 五月天综合网| 久久青青草原一区二区| 久久99精品久久久久久水蜜桃| 日本在线高清视频一区| 亚洲免费在线精品一区| 欧美激情视频一区二区三区| 国产二区一区| 国产呦系列欧美呦日韩呦| 欧美激情专区| 欧美在线3区| 久久久久一区二区| 91沈先生播放一区二区| 日本婷婷久久久久久久久一区二区| 国产亚洲精品自在久久| 国产传媒一区二区| 好吊色欧美一区二区三区| 制服国产精品| 亚洲欧洲免费无码| 亚洲自拍的二区三区| 四虎永久在线精品免费一区二区| 97视频中文字幕| 91精品网站| 亚洲精品一区国产精品| 99久久自偷自偷国产精品不卡| 国产精品裸体一区二区三区| 成人动漫在线视频| 久久青青草原一区二区| 小说区图片区图片区另类灬| 国产不卡一区二区在线观看| 精品国产乱码久久久久久88av| 欧美日韩在线播放一区二区| 久久精品国产综合精品| 一级二级三级欧美| 亚洲美女网站18| 精品欧美日韩| 日韩国产高清一区| 一区二区视频在线播放| 日韩欧美电影一区二区| 四虎影视永久免费在线观看一区二区三区| 日本成人三级| 精品无码久久久久久久动漫| 久久亚洲国产精品日日av夜夜| 久久亚洲午夜电影| 手机看片福利永久国产日韩|