日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

《Two-Archive Evolutionary Algorithm for Constrained Multiobjective Optimization》阅读笔记

發布時間:2023/12/20 编程问答 45 豆豆
生活随笔 收集整理的這篇文章主要介紹了 《Two-Archive Evolutionary Algorithm for Constrained Multiobjective Optimization》阅读笔记 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

文章目錄

  • 1 INTRODUCTION
  • 2 PRELIMINARIES
    • 2.1 文獻綜述
    • 2.2 對現有的約束處理方法的挑戰
  • 3 PROPOSED ALGORITHM
    • 3.1 密度估計方法
    • 3.2 CA的更新機制
    • 3.3 DA的更新機制
    • 3.4 后代繁殖
  • 4 EXPERIMENTAL SETUP
    • 4.1 基準函數
    • 4.2 指標
  • 5 EMPIRICAL STUDIES
  • 6 CONCLUSION
  • 7 REFERENCES

摘要 在求解約束多目標優化問題時,一個重要的問題是如何同時兼顧收斂、多樣性和可行性。針對這一問題,提出了一種無參數約束處理技術–兩檔案進化算法,用于有約束的多目標優化問題。它同時維護兩個協同檔案:一個是推動種群走向帕累托前沿的驅動力,稱為收斂導向檔案(convergence-oriented archive);另一個是主要傾向于維持種群多樣性的多樣性導向檔案(diversity-oriented archive)。特別是,為了補充CA的行為并提供盡可能多的多樣化信息,DA旨在探索CA未充分開發的區域,包括不可行的區域。為了利用這兩種檔案的互補作用,我們開發了一種受限的交配選擇機制,根據它們的進化狀態自適應地從它們中選擇合適的交配親本。在一系列測試函數上的復雜實驗和一個真實世界的案例研究充分證明了我們提出的算法相對于五種最先進的約束進化多目標優化器的競爭力。

1 INTRODUCTION

??有約束的多目標問題(CMOP)可以描述為:
minimizeF(x)=(f1(x),f2(x),...,fm(x))Tsubjecttogi(x)≥aj,j=1,2,...,qhi(x)=bj,j=q+1,...,?x∈Ω\begin{aligned} minimize \ \ &\boldsymbol{F}(\boldsymbol{x})=(f_1(\boldsymbol{x}),f_2(\boldsymbol{x}),...,f_m(\boldsymbol{x}))^T \\ subject \ \ to\ \ &g_i(\boldsymbol{x})\ge a_j, \ \ j=1,2,...,q \\ &h_i(\boldsymbol{x})= b_j,j=q+1,...,\ell \\ &\boldsymbol{x}\in \varOmega \end{aligned} minimize??subject??to???F(x)=(f1?(x),f2?(x),...,fm?(x))Tgi?(x)aj?,??j=1,2,...,qhi?(x)=bj?,j=q+1,...,?xΩ? x\boldsymbol{x}x對第jjj個約束條件的違反程度計算方法為:
cj(x)={<gi(x)/aj?1>,j=1,...,q<∣hj(x)/bj?1∣??>,j=q+1,...,?c_j\left( \boldsymbol{x} \right) =\begin{cases} \left< g_i\left( \boldsymbol{x} \right) /a_j-1 \right> ,&j=1,...,q\\ \left< \left| h_j\left( \boldsymbol{x} \right) /b_j-1 \right|-\epsilon \right> ,&j=q+1,...,\ell\\ \end{cases} cj?(x)={?gi?(x)/aj??1?,?hj?(x)/bj??1???,?j=1,...,qj=q+1,...,?? ?\epsilon?是一個容忍項,可以將等式約束放松為不等式約束。<?>\left< \cdot \right>???表示當括號內大于等于零時函數值為0,否則函數值為負數。因此x\boldsymbol{x}x整體的違反程度為:
CV(x)=∑j=1?cj(x)CV(\boldsymbol{x})=\sum_{j=1}^{\ell}{c_j\left( \boldsymbol{x} \right)} CV(x)=j=1??cj?(x)CV(x)=0CV(\boldsymbol{x})=0CV(x)=0 時說明x\boldsymbol{x}x是可行的,否則x\boldsymbol{x}x不可行。
??給定兩個可行解x1,x2∈Ω\boldsymbol{x}^{1},\boldsymbol{x}^2\in \varOmegax1,x2Ω,若在任一目標函數上F(x1)F(\boldsymbol{x}^{1})F(x1)都不差于F(x2)F(\boldsymbol{x}^{2})F(x2),且至少在一個目標上完全優于F(x2)F(\boldsymbol{x}^{2})F(x2),則稱x1\boldsymbol{x}^1x1支配x2\boldsymbol{x}^2x2x1?x2\boldsymbol{x}^{1} \preceq\boldsymbol{x}^{2}x1?x2)。若?x∈Ω\nexists\boldsymbol{x}\in\varOmega?xΩ 使得x?x?\boldsymbol{x}\preceq\boldsymbol{x^*}x?x?,則稱x?\boldsymbol{x^*}x?帕累托最優解(Pareto-optimal),所有帕累托最優解的集合稱為帕累托解集(Pareto set;PS),帕累托前沿面(Pareto front;PF)定義為:PF={F(x)∣x∈PS}PF=\left\{ \boldsymbol{F(x)}| \boldsymbol{x}\in PS \right\}PF={F(x)xPS}
??一般而言,收斂性、多樣性和可行性是CMOP的三個基本問題。大多數現有的約束處理技術在考慮可行域內的收斂和多樣性之間的平衡之前,首先傾向于將種群盡可能地留在可行域。但這可能會導致種群陷入局部最優或局部可行域,特別是當可行域很窄或在搜索空間中分布不均勻時。
??在本文中我們提出了一種兩階段進化算法(C-TAEA),同時維持兩個協作互補的檔案:一個是收斂導向檔案(CA),一個是多樣性導向檔案(DA)。C-TAEA主要的特點如下:
1)正如名字所示,CA是進化過程中保證解的收斂性和可行性的主導力量,它能夠使解接近PF。
2)相比之下,DA在沒有考慮可行性的情況下,主要傾向于保持進化過程的收斂性和多樣性。特別是,DA探索了CA尚未開發的領域。這不僅提高了CA在當前搜索的可行域內的種群多樣性,而且有助于跳出局部最優或局部可行域。
3)為了利用這兩個協作檔案的互補效應和精英信息,我們提出了一種受限的交配選擇機制,根據CA和DA的進化狀態分別從CA和DA中選擇合適的交配親本。
??本文的其余部分組織如下:第二節簡要概述了為解決CMOP的最新的進化算法,然后引出了我們的動機。第三節介紹了所提出算法的技術細節。在第四節和第五節中,對所提出的算法的有效性和競爭力進行了實證研究,并在不同的基準問題上與五種最新的約束EMO算法進行了比較。最后,第六節對全文進行了總結,并對今后的發展方向提出了設想。

2 PRELIMINARIES

2.1 文獻綜述

??多目標優化中現有的約束處理技術的思想可以分為以下三類:
??第一類主要是由可行性主導的,其中可行方案總是被賦予更高的優先級以生存到下一次迭代。在1990年的算法[13]中對約束的重視程度高于對目標函數的重視程度,這導致了對可行解決方案的搜索優先于最佳解決方案。還有一些算法[14]直接忽視不可行解,這樣的算法在遇到狹窄的可行域時會產生很多問題。后來Deb[2]等人提出了一種帶約束的支配關系。即只要滿足以下條件就稱x1\boldsymbol{x}^1x1支配x2\boldsymbol{x}^2x2:1)x1\boldsymbol{x}^1x1可行而x2\boldsymbol{x}^2x2不可行;2)二者都不可行但CV(x1)<CV(x2)CV(\boldsymbol{x}^1)<CV(\boldsymbol{x}^2)CV(x1)<CV(x2);3)二者都可行且x1?x2\boldsymbol{x}^1\prec\boldsymbol{x}^2x1?x2。在現有的NSGA-II和NSGA-III的基礎上使用該支配關系接可以解決CMOP問題。借用此想法,幾個MOEA/D變體[15]-[17]在子問題更新過程中使用CV作為替代標準。與文獻[2]不同,Oyama et al[18]提出了一種改進的支配關系,根據該關系,優先選擇違反較少約束的解。為了改善不可行解的可解釋性,Takahama和Sakai[19]以及Martínez和Coello[20]提出了一種??constrained\epsilon-constrained??constrained支配關系,其中當兩個解的CV之差小于閾值?\epsilon?時,兩個解違反約束的程度相同,特別的是,該閾值可以根據種群中可行解的比例自適應地調整。Asafuddoula等人[21]提出了一種自適應約束處理方法:當不可行解的CV值小于閾值時,將不可行解視為可行解。同樣,Fan等人[22]也提出了類似的觀點:基于角度的約束支配原理,即當兩個不可行解的角度大于某一閾值時,兩個不可行解被認為是彼此非支配的。
??第二類是在搜索過程中平衡收斂和可行性。Jiménez等人[23]提出了一個最小-最大公式,該公式驅動可行解向最優解進化,并驅動不可行解向可行性進化。Ray等人[24]提出了一種Ray-Tai-Seow算法,該算法使用三種不同的方法對非支配解進行比較和排序。具體地說,第一排序過程是根據對目標函數的排序,第二種是根據不同的約束條件進行的;第三種是基于目標值和約束條件的組合。基于同樣的嚴密性,Young[25]提出了一種約束優勢關系,該關系根據目標空間和約束空間的混合排序來比較解。Angantyr等人[26]也提出了類似的方法,使用目標空間和約束空間中的等級的加權平均排名。[5]提出了一種新的CMO約束處理技術:將CMOP的每個原始目標函數轉換為距離度量和懲罰函數的和。特別地,將改進的目標函數用于NSGA-II的非支配排序過程中,可以在可行域和不可行域中搜索最優解。為了提高種群的多樣性,Li et al.[27]提出了一種方法:保留孤立的不可行解。為了利用包含在不可行解中的有用信息,Peng et al.[28]提出使用一組分布在不可行域中的不可行權重來保留大量多樣性較高的不可行解。Ning et al.[29]提出了一種約束非支配排序方法,該方法根據解的Pareto排序和約束的排序得到解的約束非支配排序.。在[30]中,提出了一種對偶進化,其中不可行粒子向可行粒子進化,可行粒子向PF進化。
??最后一類試圖將不可行解修復為可行解。例如,Harada等人[31]提出了一種所謂的Pareto下降修復算子,它在約束空間中探索不可行解附近可能的可行解。然而,在實際應用中,梯度信息通常是不可用的。Singh等人[32]建議使用模擬退火法來加快從不可行解向可行解的移動過程。焦立中等人[33]提出了一種可行引導策略,其中可行方向被定義為從一個不可行解開始到其最近可行解的一個向量。然后,通過利用可行方向提供的信息,將不可行解引導到可行域。

2.2 對現有的約束處理方法的挑戰

??通過對上述文獻的回顧,我們發現大多數多目標優化中的約束處理技術過于強調可行性的重要性,而很少同時考慮收斂、多樣性和可行性之間的平衡。當遇到復雜的約束時,這可能會導致搜索無效。
??以文獻[15]中的測試問題C1-DTLZ3為例,它的目標函數與[34]的DTLZ3相同,約束條件為:
c(x)=(∑i=1mfi(x)2?16)(∑i=1mfi(x)2?r2)\text{c}\left( \mathbf{x} \right) =\left( \sum_{i=1}^m{f_i\left( \mathbf{x} \right) ^2-16} \right) \left( \sum_{i=1}^m{f_i\left( \mathbf{x} \right) ^2}-r^2 \right) c(x)=(i=1m?fi?(x)2?16)(i=1m?fi?(x)2?r2)下圖顯示了當r=6r=6r=6時MOEA/D和NSGA-III的運算結果。由于可行域與不可行域交織在一起,所喲當解離開可行邊界,CV值就會增大。因此可行性主導的結果就是解只能停留在外層可行邊界。

??文獻[15]中的測試問題C2-DTLZ2為例,它的目標函數與[34]的DTLZ2相同,約束條件為:
c(x)=max?{max?mi=1[(fi(x)?1)2+∑j=1,j≠imfj2?r2][∑i=1m(fi(x)?1m)2?r2]}\begin{aligned} \text{c}\left( \mathbf{x} \right) =\max \left\{ \underset{i=1}{\overset{m}{\max}}\left[ \left( f_i\left( \mathbf{x} \right) -1 \right) ^2+\sum_{j=1,j\ne i}^m{f_{j}^{2}}-r^2 \right] \left[ \sum_{i=1}^m{\left( f_i\left( \mathbf{x} \right) -\frac{1}{\sqrt{m}} \right) ^2}-r^2 \right] \right\} \end{aligned} c(x)=max????i=1maxm????(fi?(x)?1)2+j=1,j?=im?fj2??r2???[i=1m?(fi?(x)?m?1?)2?r2]?????下圖給出了該例子的圖示,其中可行區域在PF上是不連續的。如果每個可行部分較小,則可行性驅動的策略將很容易陷入部分可行。此外,最先進的基于分解的EMO算法中使用的權重向量,例如C-MOEA/D和C-NSGA-III,如果它們的大小足夠小,則很可能沒有一個穿過這些可行段。這給基于分解的EMO算法尋找可行解帶來了很大的困難。如圖所示的結果完全驗證了我們的斷言,當我們將r設置為相對較小的值(例如0.1時)時,C-MOEA/D和C-NSGA-III都無法在所有三個可行部分上找到帕累托最優解。

??在這些討論的基礎上,我們發現過度使用可行性信息會限制受限EMO算法的搜索能力。在第三節中,我們將演示如何使用兩個歸檔策略平衡在整個搜索空間中同時實現收斂、多樣性和可行性。特別是,我們發現,合理利用不可行信息有助于解決勘探和開采之間的兩難境地。

3 PROPOSED ALGORITHM

??我們提出的C-TAEA的總體流程圖如下圖所示。顧名思義,C-TAEA保留兩個協作檔案,CA和DA,每個檔案都有相同的固定大小NNN。具體來說,CA起主要作用,負責將種群導向可行域并接近PF;DA作為補充,主要用于探索CA開發不足的區域。值得注意的是,為了提供盡可能多的多樣化信息,DA的更新不考慮可行性信息。在繁殖過程中,交配親本根據其進化狀態分別從CA和DA中選擇,如第III-D節所述。然后,根據第III-B節和第III-C節分別描述的機制,使用子代來更新CA和DA。

3.1 密度估計方法

??在解釋C-TAEA中CA和DA的更新機制之前,我們首先介紹了對這兩種情況都有用的密度估計方法。為了便于密度估計,我們借鑒了MOEA/D-M2M[35]的思想,將目標空間劃分為NNN個子區域,每個子區域由標準單純形上唯一權向量表示。特別地,我們使用我們先前提出的可擴展到多目標場景的權重向量生成方法[27]來采樣一組均勻分布的權重向量,即W={w1,...,wN}\text{W}= \left\{\text{w}^1,..., \text{w}^N\right\}W={w1,...,wN}。具體地說,一個子區域Δi\Delta ^iΔi,其中i∈{1,...,N}i\in\left\{1,...,N\right\}i{1,...,N},它的定義為:
Δi={F(x)∈Rm∣<F(x),wi>≤<F(x),wj>}\Delta ^i = \left\{ \mathbf{F}\left( \mathbf{x} \right)\in \mathbb{R}^m|\left<\mathbf{F}\left( \mathbf{x} \right),\text{w}^i \right>\le\left<\mathbf{F}\left( \mathbf{x} \right),\text{w}^j \right> \right\} Δi={F(x)Rm?F(x),wi??F(x),wj?} 其中j∈{1,...,N}j\in\left\{1,...,N\right\}j{1,...,N}<F(x),w>\left<\mathbf{F}\left( \mathbf{x} \right),\text{w} \right>?F(x),w?表示F(x)\mathbf{F}\left( \mathbf{x} \right)F(x)w\text{w}w之間的銳角。建立子區域后,種群中的每個解x\mathbf{x}x都與下指標如下的子區域對應聯系:
k=argmin?i∈{1,...,N}<Fˉ(x),wi>k=\underset{i\in \left\{ 1,...,N \right\}}{arg\min}\left< \mathbf{\bar{F}}\left( \mathbf{x} \right) ,\mathbf{w}^i \right> k=i{1,...,N}argmin??Fˉ(x),wi?這里Fˉ(x,t)\mathbf{\bar{F}}\left( \mathbf{x},t\right)Fˉ(x,t)是歸一化的x\mathbf{x}x的目標向量,其第iii個目標函數的計算方法為:
fiˉ(x)=fi(x)?zi?zinad?zi?\bar{f_i}\left( \mathbf{x}\right)=\frac{f_i\left( \mathbf{x} \right) -z_i^*}{z_{i}^{nad}-z_i^*} fi?ˉ?(x)=zinad??zi??fi?(x)?zi???其中i∈{1,...,N}i\in\left\{1,...,N\right\}i{1,...,N}zi?=minx∈Sfi(x)z_i^*=min_{\mathbf{x}\in S}f_i(\mathbf{x})zi??=minxS?fi?(x)zinad=maxx∈Sfi(x)z_i^{nad}=max_{\mathbf{x}\in S}f_i(\mathbf{x})zinad?=maxxS?fi?(x)SSS指當前解所在的解集。
??算法1給出了該關聯過程的偽代碼。將解與子區域關聯后,子區域的密度被計算為與其關聯的解的個數。
Algorithm 1:關聯過程
Input:解集SSS,權重向量集WWW
Output:子區域Δ1,...,ΔN\Delta ^1,...,\Delta ^NΔ1,...,ΔN
Step 1) Δ1←?\Delta ^1\gets \emptysetΔ1?,…,ΔN←?\Delta ^N\gets \emptysetΔN?
Step 2) 對每一個x∈S\mathbf{x}\in SxS,以及每一個w∈W\mathbf{w}\in WwW都計算:
d⊥(x,w)=x?wTx/∥w∥d^{\bot}\left( \mathbf{x,w} \right) =\mathbf{x}-\mathbf{w}^{\mathbf{T}}\mathbf{x/}\lVert \mathbf{w} \rVert d(x,w)=x?wTx/wStep 3) 令k←argmin?w∈Wd⊥(x,w)k\gets \underset{\mathbf{w} \in W}{arg\min}d^{\bot}\left( \mathbf{x,w} \right)kwWargmin?d(x,w)
Step 4) Δk←Δk∪{x}\Delta ^k\gets \Delta ^k\cup \left\{\mathbf{x}\right\}ΔkΔk{x}
Step 5) 最后輸出Δ1,...,ΔN\Delta ^1,...,\Delta ^NΔ1,...,ΔN
注意:偽代碼中的x\mathbf{x}x實際指目標空間中的解,也就是上文中的F(x)\mathbf{F}\left( \mathbf{x} \right)F(x)
簡述版:用[35]MOEA/D-M2M中的方法將目標空間分為 NNN個子空間Δ1,...,ΔN\Delta ^1,...,\Delta ^NΔ1,...,ΔN,再用[2]中的方法生成均勻分布的權重向量集WWW,對解集中的每個解F(x)\mathbf{F}\left( \mathbf{x} \right)F(x)求出與其夾角最小的權重向量wk\mathbf{w}^kwk,將該解分配到Δk\Delta ^kΔk

3.2 CA的更新機制

??CA的作用與參考文獻中其他有約束的EMO算法相似。它首先將種群盡可能地推向可行域,然后試圖在可行域內平衡收斂性和多樣性。算法2給出了CA更新機制的偽代碼。具體來說,我們首先形成混合種群HCH_CHC?,即 CA 和子代QQQ的組合。HCH_CHC?中的可行解被儲存到臨時檔案SCS_CSC?中(算法2的第3-5行)。之后,后續的程序取決于SCS_CSC?的大小。

1)若SCS_CSC?的大小等于NNN,即提前設定的CA的大小,則SCS_CSC?就是新的CA,此次更新程序終止。
2)若∣SC∣>N\left| S_C\right|>NSC?>N,我們使用[2]中的快速非支配排序方法,將SCS_CSC?分為不同的非支配等級:F1F_1F1?F2F_2F2?等。從F1F_1F1?開始,依次選擇每個非支配等級構成臨時檔案SSS直至檔案大小等于NNN或超過NNN。如果我們將最后一個可接受的非支配水平表示為FlF_lFl?,則屬于Fl+1F_{l+1}Fl+1?以后的解不再被考慮。需要注意的是,如果SSS的大小等于NNN,則SSS可以用作新的CA;否則,我們將S中的每個解與其對應的子區域相關聯,并計算SSS的密度信息,依次刪去最擁擠區域的最差解,直到SSS的大小等于NNN(算法2的第11-21行)。值得注意的是,為了改善一個分區域內的人口多樣性,我們提出了以下過程來確定最差解xw\mathbf{x}^wxw。首先,我們計算Δi\Delta ^iΔi內每個個體x\mathbf{x}x與其最近點的距離:
dist(x)=min?x′∈Δi,x≠x′∥x?x′∥dist(\mathbf{x})=\underset{\mathbf{x'}\in \mathbf{\Delta }^i,\mathbf{x}\ne \mathbf{x'}}{\min}\lVert \mathbf{x}-\mathbf{x'} \rVert dist(x)=xΔi,x?=xmin?x?x具有最小距離的解被儲存在臨時檔案StS_tSt?中,而xw\mathbf{x}^wxw的定義如下:
xw=argmaxx∈St{gtch(x∣wi,z?)}\mathbf{x}^w=\underset{\mathbf{x}\in S_t}{argmax}\left\{ g^{tch}(\mathbf{x}|\mathbf{w}^i,\mathbf{z^*})\right\} xw=xSt?argmax?{gtch(xwi,z?)}這里,
gtch(x∣wi,z?)=max1≤j≤m{∣fj(x)?zj?∣/wji}g^{tch}(\mathbf{x}|\mathbf{w}^i,\mathbf{z^*})=\underset{1\le j\le m}{max}\left\{\left|f_j(\mathbf{x})-z_j^*\right|/w_j^i \right\} gtch(xwi,z?)=1jmmax?{?fj?(x)?zj???/wji?}
3)若∣SC∣<N\left| S_C\right|<NSC?<N,我們求解如下雙目標優化問題:
minimizeF(x)=(f1(x),f2(x))Twhere{f1(x)=CV(x)f2(x)=gtch(x∣wi,z?)minimize \ \ \mathbf{F}(\mathbf{x})=\left(f_1(\mathbf{x}), f_2(\mathbf{x})\right)^T \\ where \begin{cases} f_1(\mathbf{x})=CV(\mathbf{x}) \\ f_2(\mathbf{x})=g^{tch}(\mathbf{x}|\mathbf{w}^i,\mathbf{z}^*) \\ \end{cases} minimize??F(x)=(f1?(x),f2?(x))Twhere{f1?(x)=CV(x)f2?(x)=gtch(xwi,z?)?
??在上述問題的基礎上,用快速非支配排序的方法將HCH_CHC?中的不可行解劃分為幾個非支配等級,前幾個級別的解在CA中有更高的優先級,多余的解根據其CV進行刪除,CV值較大的優先刪除。這些操作都是為了進一步平更收斂性、多樣性和可行性。
簡述版:每次迭代都從上一代CA和本次生成的子代Q形成HCH_CHC?中選擇。首先選出HCH_CHC?中可行的解放入SCS_CSC?,接下來討論SCS_CSC?與N大小不同時的情況:∣SC∣=N\left| S_C\right|=NSC?=N時,CA←SC\gets S_CSC?∣SC∣>N\left| S_C\right|>NSC?>N時,首先對SCS_CSC?中的解進行非支配排序得到{F1,F2,...}\left\{F_1,F_2,...\right\}{F1?,F2?,...},依次將其放入一個暫時的集合SSS直至∣S∣=N\left| S\right|=NS=N,若出現了∣S∣>N\left| S\right|>NS>N的情況,則對此時SSS中的x\mathbf{x}x對應的F(x)\mathbf{F}\left( \mathbf{x} \right)F(x)進行歸一化后分到不同的子空間(3.1中的方法),選出最擁擠的子空間并計算其中每個解與最近鄰的距離,距離最小的稱之為最差解,優先刪除,每刪除一個解后重新檢查此時∣S∣>N\left| S\right|>NS>N是否仍成立,若仍成立,則繼續判斷最擁擠的子空間是否發生變化,再計算該子空間中每個解計算最近鄰,循環直至∣S∣=N\left| S\right|=NS=N∣SC∣<N\left| S_C\right|<NSC?<N時,從HCH_CHC?中不可行解中選擇非支配解排序靠前的補全CA,如果在非支配解排序過程中又出現∣S∣>N\left| S\right|>NS>N的情況,仍是依次刪除最差解,此時最差解的評判標準是CV值的大小,CV越大則解越差。

3.3 DA的更新機制

??與CA不同,DA的目的是維持解的多樣性。它的更新機制有兩個特點:1)它沒有考慮約束;2)它以最新的CA作為參考集,探索CA的未開發區域來補充CA。算法3給出了這種更新過程的偽代碼。

??具體而言,類似于3.2節,我們首先將DA與子代種群QQQ相結合,以形成混合種群HdH_dHd?。然后,按照3.1節(算法3的第1-3行)中介紹的方法,將HdH_dHd?中的每個解和最新的CA分別與其對應的子區域相關聯。然后,我們依次研究每個子區域,并決定HdH_dHd?中的解是否保留在DA中。每個子區域在第itritritr次迭代中最多保留itritritr個解,對于當前子區域Δi\Delta^iΔii∈{1,...,N}i\in\left\{1,...,N\right\}i{1,...,N},如果在Δi\Delta^iΔi的CA中已經存在itritritr個解,則在此迭代過程中,HdH_dHd?中的解將不會留在Δi\Delta^iΔi中。否則,將選擇與Δi\Delta^iΔi相關的HdH_dHd?中最好的非支配解,表示為Oi\mathbf{O}^iOi,并將其選入新的DA(算法3的第10-12行)。這里,最優解xb\mathbf{x}^bxb被定義為:
xb=argminx∈Oi{gtch(x∣wi,z?)}\mathbf{x}^b=\underset{\mathbf{x}\in O_i}{argmin}\left\{ g^{tch}(\mathbf{x}|\mathbf{w}^i,\mathbf{z^*})\right\} xb=xOi?argmin?{gtch(xwi,z?)}直至DA被填滿。

3.4 后代繁殖

??兩個檔案之間的互動和合作是C-TAEA中至關重要的一步。除了CA和DA的更新機制的互補行為外,促成這種合作的另一個因素是受限制的交配選擇。一般來說,它的主要目的是利用這兩個檔案的精英信息進行后代繁殖。算法4提供了該受限交配選擇過程的偽代碼。

具體地說,我們首先將CA和DA組合成復合集HmH_mHm?。然后,我們分別評估CA和DA的非支配解在HmH_mHm?中的比例(算法4的第2行和第3行)。如果ρc>ρd\rho_c>\rho_dρc?>ρd?,則CA的收斂狀態好于DA。因此,第一個交配親本是從CA中選擇的;否則,它來自DA(算法4的第4-7行)。至于另一個交配親本,它是從CA還是DA中選擇,取決于非支配解在CA中的比例。CA擁有的非支配解越多,它被選為交配池的機會就越大。如算法4的第5-11行所示,我們使用二進制錦標賽選擇來選擇交配親本。

如算法5所示,與[2]中提出的算法相同,該錦標賽選擇過程是可行性驅動的。具體來說,如果隨機選擇的候選者都是可行的,則根據帕累托優勢進行選擇;如果只有一個可行,則選擇可行的;否則,以隨機的方式選擇交配親本。一旦選擇了交配的雙親,我們就使用流行的模擬二進制交叉[36]和多項式突變[37]來繁殖后代。原則上,只需稍加修改即可應用任何其他復制操作符。

4 EXPERIMENTAL SETUP

??在討論實證結果之前,這一部分簡要介紹了我們的實證研究中用于同行比較的基準問題、性能指標和最新的約束EMO算法。

4.1 基準函數

??從文獻[15]中選取了5個約束測試問題(即C1-DTLZ1/DTLZ3、C2-DTLZ2和C3-DTLZ1/DTLZ4)和6個新提出的測試問題(DC1-DTLZ1/DTLZ3、DC2DTLZ2/DTLZ4和DC3-DTLZ1/DTLZ4)組成了基準測試集。所有這些測試問題都可以擴展到任意數量的目標,其中我們在這里設置了m∈{3,5,8,10,15}m\in\left\{3,5,8,10,15\right\}m{3,5,8,10,15}。補充材料的第一節給出了這些測試問題的詳細描述,包括數學定義和性質。

4.2 指標

??選擇了兩個廣泛使用的度量來評估不同算法的性能。
1)Inverted Generational Distance(IGD):設 P?P^*P?是在PF上均勻采樣的一組點,PPP是EMO算法求得的解集,則PPP的IGD值為:
IGD(P,P?)=∑z∈P?dist(z,P)∣P?∣IGD(P,P^*)=\frac{\sum_{\mathbf{z}\in P^*}{dist\left( \mathbf{z},P \right)}}{\left| P^* \right|} IGD(P,P?)=P?zP??dist(z,P)?
其中,dist(z,P)dist\left( \mathbf{z,}P \right)dist(z,P)表示z\mathbf{z}zPPP中最近點的歐氏距離。
2)Hypervolume (HV):設zr=(z1r,...,zmr)T\mathbf{z}^r=\left(z_1^r,...,z_m^r \right)^Tzr=(z1r?,...,zmr?)T是可以被所有帕累托最優目標向量支配的最差解,PPP的HV值為目標空間中由PPPzr\mathbf{z}^rzr圍成的體積:
HV(P)=VOL(?z∈P[z1,z1r]×...×[zm,zmr])HV(P)=VOL(\bigcup_{z\in P}{\left[ z_1,z_{1}^{r} \right] \times ...\times \left[ z_m,z_{m}^{r} \right]}) HV(P)=VOL(zP??[z1?,z1r?]×...×[zm?,zmr?])
其中,VOL表示勒貝格測度。
??較小的IGD和較大的HV表示解更接近PF。

5 EMPIRICAL STUDIES

6 CONCLUSION

??本文針對約束多目標優化問題,提出了一種無參數約束處理技術C-TAEA。在C-TAEA中,我們同時維護兩個協作檔案。具體地說,一種被稱為CA,主要關注于推動人口向PF靠攏;另一種,被稱為DA,主要傾向于探索CA未被開發的區域(即使是那些不可行的區域),從而提供更多樣化的信息。在這種情況下,CA和DA具有不同的行為和互補的作用。特別是,它們通過一種有限的交配選擇機制相互補充,該機制為后代繁殖選擇互補的交配親本。C-TAEA的性能已經在一系列基準問題上進行了調查,這些問題具有各種類型的約束和多達15個目標。實驗結果充分證明了該算法在CMOP上的競爭力,并與五種最新的約束EMO算法進行了比較。除了人工基準問題外,C-TAEA的有效性也已在WDN設計優化的真實案例研究中得到驗證。
??約束多目標優化問題在實際應用中普遍存在。本文考慮的CMOP并不包含現實世界中的所有類型的約束。希望本文能啟發更多關于約束多目標優化的研究,包括其他約束公式的研究以及在現實世界優化場景中的應用。正如前面在[6]-[8]中所證明的,我們認為C-TAEA不僅僅是一個特定的算法。相反,它的基本思想,即同時維護多個互補和協同的檔案,可以廣泛應用于一般的EMO算法設計。在未來,從算法設計和理論基礎兩個角度對其潛在機制進行深入研究是值得探討的。此外,我們計劃研究這一雙檔案協作框架在更廣泛的問題上的有效性,例如無約束的MOP,包括那些具有復雜屬性的MOP(例如,具有復雜PSS的問題[43]以及不平衡的收斂和多樣性[44])、動態優化(例如,具有變化的目標或約束的問題[45])。

7 REFERENCES

(僅列出了本文中所提到的文獻)
[2] K. Deb, S. Agrawal, A. Pratap, and T. Meyarivan,“A fast and elitist multiobjective genetic algorithm: NSGA-II,” IEEE Trans. Evol. Comput., vol. 6, no. 2, pp. 182–197, Apr. 2002.
[5] Y. G. Woldesenbet, G. G. Yen, and B. G. Tessema,“Constraint han- dling in multiobjective evolutionary optimization,” IEEE Trans. Evol. Comput., vol. 13, no. 3, pp. 514–525, Jun. 2009.
[15] H. Jain and K. Deb,“An evolutionary many-objective optimization algorithm using reference-point based nondominated sorting approach, part II: Handling constraints and extending to an adaptive approach,” IEEE Trans. Evol. Comput., vol. 18, no. 4, pp. 602–622, Aug. 2014.
[16] M. A. Jan and Q. Zhang,“MOEA/D for constrained multiobjective optimization: Some preliminary experimental results,” in Proc. U.K. Workshop Comput. Intell. (UKCI), 2010, pp. 1–6.
[17] R. Cheng, Y. Jin, M. Olhofer, and B. Sendhoff, “A reference vector guided evolutionary algorithm for many-objective optimization,” IEEE Trans. Evol. Comput., vol. 20, no. 5, pp. 773–791, Oct. 2016.
[18] A. Oyama, K. Shimoyama, and K. Fujii, “New constraint- handling method for multi-objective and multi-constraint evolutionary optimization,” Jpn. Soc. Aeronaut. Space Sci. Trans., vol. 50, no. 167, pp. 56–62, 2007.
[19] T. Takahama and S. Sakai,“Efficient constrained optimization by the ?\epsilon? constrained rank-based differential evolution,” in Proc. IEEE Congr.Evol. Comput. (CEC), 2012, pp. 1–8.
[21] M. Asafuddoula, T. Ray, and R. A. Sarker, “A decomposition-based evolutionary algorithm for many objective optimization,” IEEE Trans. Evol. Comput., vol. 19, no. 3, pp. 445–460, Jun. 2015.
[22] Z. Fan et al.,“Angle-based constrained dominance principle in MOEA/D for constrained multi-objective optimization problems,” in Proc. IEEE Congr. Evol. Comput. (CEC), 2016, pp. 460–467.
[23] F. Jiménez, A. F. Gómez-Skarmeta, G. Sánchez, and K. Deb,“An evolutionary algorithm for constrained multi-objective optimization,” in Proc. IEEE Congr. Evol. Comput. (CEC), 2002, pp. 1133–1138.
[24] T. Ray, K. Tai, and K.-C. Seow,“Multiobjective design optimization by an evolutionary algorithm,” Eng. Optim., vol. 33, no. 4, pp. 399–424, 2001.
[26] A. Angantyr, J. Andersson, and J.-O. Aidanpaa, “Constrained optimization based on a multiobjective evolutionary algorithm,” in Proc. IEEE Congr. Evol. Comput. (CEC), 2003, pp. 1560–1567.
[27] K. Li, K. Deb, Q. Zhang, and S. Kwong,“An evolutionary many objective optimization algorithm based on dominance and decomposition,” IEEE Trans. Evol. Comput., vol. 19, no. 5, pp. 694–716, Oct. 2015.
[28] C. Peng, H.-L. Liu, and F. Gu, “An evolutionary algorithm with directed weights for constrained multi-objective optimization,” Appl. Soft Comput., vol. 60, pp. 613–622, Nov. 2017.
[29] W. Ning et al.,“Constrained multi-objective optimization using constrained non-dominated sorting combined with an improved hybrid multi-objective evolutionary algorithm,” Eng. Optim., vol. 49, no. 10, pp. 1645–1664, 2017.
[30] A. E. Sorkhabi, M. D. Amiri, and A. R. Khanteymoori,“Duality evolution: An efficient approach to constraint handling in multi-objective particle swarm optimization,” Soft Comput., vol. 21, no. 24, pp. 7251–7267, 2017.
[31] K. Harada, J. Sakuma, I. Ono, and S. Kobayashi,“Constraint-handling method for multi-objective function optimization: Pareto descent repair operator,” in Proc. 4th Int. Conf. Evol. Multi Criterion Optim. (EMO), 2006, pp. 156–170.
[32] H. K. Singh, T. Ray, and W. Smith,“C-PSA: Constrained Pareto simulated annealing for constrained multi-objective optimization,” Inf. Sci., vol. 180, no. 13, pp. 2499–2513, 2010.
[33] L. Jiao, J. Luo, R. Shang, and F. Liu, “A modified objective function method with feasible-guiding strategy to solve constrained multi-objective optimization problems,” Appl. Soft Comput., vol. 14, pp. 363–380, Jan. 2014.
[35] H. Liu, F. Gu, and Q. Zhang,“Decomposition of a multiobjective optimization problem into a number of simple multiobjective subproblems,” IEEE Trans. Evol. Comput., vol. 18, no. 3, pp. 450–455, Jun. 2014.
[36] K. Deb and R. B. Agrawal,“Simulated binary crossover for continuous search space,” Complex Syst., vol. 9, no. 2, pp. 115–148, 1994.
[37] K. Deb and M. Goyal,“A combined genetic adaptive search (GeneAS) for engineering design,” Comput. Sci. Informat., vol. 26, no. 4, pp. 30–45, 1996.

總結

以上是生活随笔為你收集整理的《Two-Archive Evolutionary Algorithm for Constrained Multiobjective Optimization》阅读笔记的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

www视频在线播放 | 91免费网 | 99久久精品免费看国产一区二区三区 | 日韩中文字幕视频在线观看 | 国产黄色免费在线观看 | www.av小说| 欧美久久久久久久久久 | 99久久精品免费看国产 | 操少妇视频 | 久久免费在线 | 国产区网址 | 久久久久久久久久久成人 | 亚洲中字幕 | 在线观看91av| 日韩av有码在线 | 久久久久久久久久电影 | 日韩在线中文字幕视频 | 天天操天天透 | 看污网站 | av福利资源 | 亚洲 欧美 国产 va在线影院 | 日韩在线视频国产 | 久久精品屋| 69亚洲乱| 探花视频在线观看+在线播放 | 夜夜爽天天爽 | 亚州国产精品视频 | 免费日韩av片 | 中文字幕日韩免费视频 | 中文字幕免费看 | 一区二区观看 | 欧美日韩综合在线观看 | www日韩在线观看 | 日韩com | 国产精品大片在线观看 | 欧美精品天堂 | 婷婷激情五月 | 亚洲精品资源 | 国产成人精品一区二区三区 | 欧美日韩中文字幕在线视频 | 黄色视屏免费在线观看 | 99久久精品无码一区二区毛片 | 麻豆免费观看视频 | 久久久免费高清视频 | 911久久香蕉国产线看观看 | 免费开视频 | 国产在线视频不卡 | 亚洲国产精品va在线看黑人 | 国产精品麻豆免费版 | 国产精品久久久久久久久软件 | 国产在线精品一区二区三区 | 麻豆你懂的 | 国模视频一区二区三区 | 亚洲欧美偷拍另类 | 国产视频九色蝌蚪 | 国产91粉嫩白浆在线观看 | 日韩中文字幕免费视频 | 在线v片| 国产r级在线观看 | 精品久久毛片 | 成人av免费播放 | 在线观看韩国av | 国产中文字幕在线视频 | 国产在线精品一区 | 99热手机在线观看 | 综合网天天 | 欧美午夜一区二区福利视频 | 亚洲精品乱码久久久久久 | 久久亚洲私人国产精品va | 欧美色就是色 | 亚洲欧美综合精品久久成人 | 国产剧情在线一区 | 中文字幕乱码亚洲精品一区 | 欧美资源 | 久久国产精品久久精品国产演员表 | 国产精品九九视频 | 绯色av一区 | 三级免费黄 | 亚洲国产精品va在线看黑人动漫 | 日韩午夜精品福利 | 亚洲激情综合网 | 亚洲视频电影在线 | 91激情视频在线观看 | 九九热国产视频 | 日韩高清成人在线 | 中文有码在线视频 | 日韩精品一区二区三区在线播放 | 亚洲天天在线 | 天无日天天操天天干 | 在线观看一区二区视频 | 日韩精品一区二区三区免费观看视频 | 日本在线观看中文字幕 | 蜜臀av夜夜澡人人爽人人桃色 | 天天草天天色 | 免费在线观看视频一区 | 日韩av网页 | www亚洲一区| 久久久麻豆| 国产黄色一级片 | 国产精品一区二区av影院萌芽 | 久草视频手机在线 | 国内久久精品 | 香蕉影院在线播放 | 娇妻呻吟一区二区三区 | 国产人免费人成免费视频 | 999视频网 | 日韩激情网 | 丁香九月激情综合 | 最新久久免费视频 | 99精品热视频只有精品10 | 欧美日韩视频免费 | 一级黄色片在线观看 | 久久精品三级 | 亚洲欧美在线综合 | 奇米777777| 最新高清无码专区 | 亚洲国产成人精品久久 | 激情五月婷婷综合 | 国产在线高清 | 国产手机在线视频 | 超碰人人射 | 欧美激情精品久久久 | 黄色在线观看免费网站 | 日韩欧美在线观看一区二区三区 | 美女网站色 | 三级动态视频在线观看 | 日本在线中文在线 | 亚洲干| 黄网站污 | 91福利专区 | 日本大片免费观看在线 | 日韩免费三区 | 日韩午夜高清 | 天天射射天天 | 在线激情影院一区 | 国产精品亚洲视频 | 国产成人一区三区 | 亚洲成人av在线 | 色综合久久久久网 | 国产黄色av网站 | 日韩免费在线观看 | 91九色视频导航 | 成人国产精品免费 | 久久久精品免费看 | 精品999 | 99精品免费久久久久久久久 | 日韩资源在线播放 | 久久手机精品视频 | av天天澡天天爽天天av | 亚洲涩涩涩涩涩涩 | 黄色大全免费网站 | 国产免费成人av | 国产精品成人国产乱 | 日韩精品2区 | 午夜精品久久久久久久99热影院 | 亚洲黄色影院 | 免费av网站在线 | 韩国av在线 | 国产四虎影院 | 精品亚洲免费 | 天天亚洲综合 | 日韩伦理片一区二区三区 | 国产流白浆高潮在线观看 | 96亚洲精品久久久蜜桃 | 国产精品中文在线 | 亚洲无吗天堂 | 99精品在线免费观看 | 国产成人亚洲在线观看 | 亚洲成人黄色 | 91亚洲精品久久久中文字幕 | 精品一区二区日韩 | 欧美日韩国产综合一区二区 | 国产精品 国内视频 | 久久麻豆视频 | 一区二区久久久久 | 国产免费叼嘿网站免费 | 国产理论在线 | 激情www| 人人澡视频 | 成人动漫精品一区二区 | 青青久草在线 | 国产第一页福利影院 | 在线观看视频福利 | 日韩婷婷 | 国产一区二区久久久久 | 国产精品普通话 | 精品在线播放 | 伊人天天狠天天添日日拍 | 精品国偷自产在线 | 亚洲午夜久久久久久久久 | 日韩精品视频网站 | 国产麻豆视频免费观看 | 在线观看成人国产 | 国产精品色在线 | 香蕉成人在线视频 | 嫩草av影院 | 香蕉影视在线观看 | 亚洲专区视频在线观看 | 97网在线观看 | 久久久黄色av | 国产 欧美 日本 | 91麻豆国产福利在线观看 | 国产精品人人做人人爽人人添 | 中文在线免费看视频 | 1024在线看片 | 日韩国产精品久久久久久亚洲 | 911国产 | 日韩欧美在线一区 | 国产在线精品区 | 96av在线视频 | 久久草草影视免费网 | 免费视频91| 久久精品99视频 | 91精品第一页 | 91色在线观看视频 | 日日爽视频 | 九九影视理伦片 | 美女网站色在线观看 | 日韩久久久 | 91九色老 | 97在线成人| 91完整版在线观看 | 激情视频91 | 麻豆国产在线播放 | 好看的国产精品视频 | 久久婷婷国产色一区二区三区 | av三区在线 | 国产小视频你懂的在线 | 玖玖视频在线 | 国产精品久久人 | 国产尤物视频在线 | 波多野结衣电影一区二区 | 日本精品久久久久影院 | 久久视频国产精品免费视频在线 | 在线视频 91 | 中文字幕在线观看网 | 久久精品视频2 | www.久草.com| 亚洲专区中文字幕 | 久久久久久久久久影院 | 黄色av观看 | 97超级碰 | 久久天天躁夜夜躁狠狠躁2022 | 久久激情视频免费观看 | 国产一区二区视频在线 | 91手机视频在线 | 美州a亚洲一视本频v色道 | 免费在线观看av网站 | 国产网红在线观看 | 免费合欢视频成人app | 视频一区二区在线 | 黄色的网站在线 | 亚洲视频在线看 | 中文字幕一区二区三区四区视频 | 免费观看十分钟 | 色综合天天狠天天透天天伊人 | 激情五月五月婷婷 | 成人观看视频 | 91看片在线看片 | 人人干人人艹 | 久久久久久激情 | 缴情综合网五月天 | 99日韩精品 | 国产1区在线 | 在线免费黄色毛片 | 国产精品免费视频观看 | 国产精品一区在线观看 | 又大又硬又黄又爽视频在线观看 | 国产手机视频在线 | 国产一区国产精品 | 在线观看视频99 | 日本精品一 | 丝袜美腿在线播放 | 欧美人人爱 | 国产综合在线视频 | 亚洲成人精品在线 | 欧美三级免费 | 免费看黄色大全 | 日b视频国产 | av专区在线| 夜夜躁狠狠躁日日躁 | 色片网站在线观看 | 亚洲综合欧美激情 | 久久黄色免费 | 91九色视频导航 | 日韩在线视频不卡 | av动态图片 | 性色av一区二区三区在线观看 | 日本在线成人 | 国产精品久久毛片 | 在线你懂的视频 | 精品视频久久久 | 国产尤物在线观看 | a级国产乱理伦片在线观看 亚洲3级 | 黄色大片免费网站 | 伊人色综合网 | 欧美日韩精品在线一区二区 | 欧美激情精品久久久久久变态 | 麻豆精品91| 国产区在线 | 青青网视频 | 日韩在线观看你懂的 | 最近中文字幕视频完整版 | 久久综合五月天 | 正在播放一区二区 | 国产精品激情 | 国产小视频在线观看免费 | 亚洲国内精品视频 | 亚洲japanese制服美女 | 色综合久久久久久中文网 | 99精品一级欧美片免费播放 | 成人av在线网 | 国产精品永久免费视频 | 国产亚洲精品美女 | www国产精品com | 国产精品免费观看国产网曝瓜 | 在线观看黄色免费视频 | 99久久精品免费视频 | 激情av网址 | 日韩电影在线观看一区 | 四虎影视8848aamm | 亚洲国产小视频在线观看 | 日本久久久久久久久久久 | 狠狠色丁香久久婷婷综合_中 | 波多野结衣在线视频免费观看 | 天天干天天草 | www在线观看国产 | 在线观看视频三级 | 免费在线观看日韩视频 | 久久伊人八月婷婷综合激情 | 精品在线99 | 精品亚洲国产视频 | 国产在线视频资源 | 日韩丝袜 | 欧美污在线观看 | 91色一区二区三区 | 久久久久久久av | 天天操比| 日韩一级精品 | 国产999免费视频 | 国产亚洲精品久久网站 | 综合av在线| 91精品播放| 欧美极品少妇xxxxⅹ欧美极品少妇xxxx亚洲精品 | 亚洲精品乱码久久久久久蜜桃动漫 | 国产成人av电影 | 色五月成人 | 久久综合免费 | 91av视屏| 天天爽天天爽夜夜爽 | 中文字幕色在线视频 | 国产精品乱码久久久久 | 国产一区二区三区视频在线 | 国产精品2区 | 国产精品美乳一区二区免费 | 欧美久久久久 | 亚洲国产精品电影 | 黄色免费观看网址 | 国产一卡二卡四卡国 | www.国产高清 | 免费看黄色小说的网站 | 亚洲伦理电影在线 | 日韩高清国产精品 | 日韩欧美一区二区在线观看 | 国产99久久久久久免费看 | 亚洲精品乱码久久久久久蜜桃不爽 | 最近中文字幕大全中文字幕免费 | 国产亚洲欧美日韩高清 | 精品96久久久久久中文字幕无 | 国产99久久99热这里精品5 | 久草精品免费 | 欧美三人交 | 日韩在线观看的 | 81精品国产乱码久久久久久 | 亚洲精品午夜一区人人爽 | 欧美日本一区 | 久久久蜜桃| 国内精品久久久久影院日本资源 | 久久激情日本aⅴ | 福利视频一二区 | 日韩字幕| av黄色免费在线观看 | 国产在线不卡一区 | 中文字幕免费高清在线 | 国产美女网站在线观看 | www.xxx.性狂虐 | 日本精品一区二区 | 福利视频一二区 | 日韩精品欧美精品 | 免费人成在线观看 | 欧美一区二区三区四区夜夜大片 | 久久久久久美女 | 91精品国产91久久久久久三级 | 91看片在线免费观看 | av成人免费在线看 | 97在线观看视频免费 | 超碰com| 国产高清免费观看 | 日韩免费成人 | 麻豆免费在线视频 | 丁香婷五月 | 西西444www高清大胆 | 亚洲h在线播放在线观看h | 日韩中文在线视频 | 探花视频在线观看 | 精品国产资源 | 久草在线官网 | 日韩综合在线观看 | 成人性生交大片免费观看网站 | 在线探花| 日本91在线 | 国产黄色成人 | 激情在线网| 99热这里精品 | 日韩免费| 免费视频国产 | 精品国产自在精品国产精野外直播 | 中文字幕中文字幕在线一区 | 亚洲婷婷伊人 | 亚洲欧美视频 | 久久在线观看 | 一级黄色电影网站 | 中文字幕av免费在线观看 | 久久中文字幕导航 | 国产成人一区二区啪在线观看 | 中文字幕一二三区 | 99久热精品 | 亚洲欧美乱综合图片区小说区 | 欧美在线91 | 亚洲精品中文字幕视频 | 少妇bbr搡bbb搡bbb | 中文在线字幕免费观 | 国产精品不卡在线 | 亚洲劲爆av| 久久精品久久久久 | 香蕉视频啪啪 | 一区二区视频在线观看免费 | 一级欧美黄 | 久久久国产一区二区三区四区小说 | 亚洲精品在线观看中文字幕 | 婷婷久久一区 | 99久久这里有精品 | 欧美大片mv免费 | 国产精品一区二区精品视频免费看 | 精品国模一区二区 | 日韩三级精品 | 国产精久久久久久久 | 国产色视频一区二区三区qq号 | 国产午夜三级 | 欧美a免费 | 欧美综合久久久 | 人人超在线公开视频 | 亚洲精欧美一区二区精品 | 日韩欧美视频一区二区三区 | 国产精品青青 | 五月婷婷综合在线观看 | 亚洲人成免费 | 午夜在线观看影院 | 伊人五月婷 | 国产在线精品国自产拍影院 | 精品国产乱码久久久久久1区2匹 | 久久久久久蜜桃一区二区 | 国产一区二区三区高清播放 | 免费能看的av| 少妇bbb搡bbbb搡bbbb | 亚洲综合视频在线 | 丝袜美女视频网站 | 久久视频这里有久久精品视频11 | 久久99国产精品 | 免费看久久 | 国产综合精品一区二区三区 | 四虎影视成人精品 | 91在线免费观看国产 | 亚洲免费观看视频 | 国产一区二区三区久久久 | 精品一区 精品二区 | 久免费| 青青视频一区 | 美女国产精品 | 日韩xxx视频| 国产九九热 | 日韩一区二区三区免费视频 | 日韩一区视频在线 | 一二三精品视频 | 五月激情五月激情 | 国产精品国产三级国产aⅴ无密码 | 五月天av在线 | 国产自产在线视频 | 久久精品视频国产 | 中文字幕第一页在线视频 | 91日韩免费 | 日韩专区 在线 | 91精品国自产在线观看欧美 | 日本三级在线观看中文字 | 亚洲精品国产日韩 | 国产96av| 久久精品欧美一区二区三区麻豆 | 日韩簧片在线观看 | 福利视频第一页 | 国产高清视频在线免费观看 | 久久欧美综合 | 亚州精品在线视频 | 婷婷在线色 | 99久热 | 亚洲精品456在线播放第一页 | av亚洲产国偷v产偷v自拍小说 | 亚洲国产中文字幕在线视频综合 | 亚洲免费精品一区二区 | 91免费在线视频 | 色中文字幕在线观看 | 成人免费电影 | 国产国语在线 | 亚洲成人免费在线观看 | 亚洲综合爱 | 日本久久久久久久久久 | 天天在线视频色 | 欧美激情精品久久久久久免费 | 国产精品男女啪啪 | 三级性生活视频 | 黄色福利视频网站 | 久久这里有精品 | 亚洲精品视频在线观看网站 | 在线播放精品一区二区三区 | www,黄视频 | 亚洲日本一区二区在线 | 97av色| 99国产成+人+综合+亚洲 欧美 | 国产伦理剧 | 亚洲永久精品一区 | 久久精品国产亚洲精品2020 | 一级一片免费观看 | 国产成人精品一区二区在线观看 | 亚洲日韩精品欧美一区二区 | 久产久精国产品 | 91片网| 最近2019中文免费高清视频观看www99 | 久久成熟 | 日韩电影中文,亚洲精品乱码 | 日韩电影在线看 | 国产精品九九九九九九 | 国产一区免费视频 | 国产美女视频免费观看的网站 | 91亚洲视频在线观看 | 69av网| 国产精品久久一区二区无卡 | 午夜精品久久久久99热app | 国产免费观看久久黄 | 四虎影视精品成人 | 日韩免费在线一区 | 日韩影视精品 | 在线播放av网址 | 亚洲伊人网在线观看 | 精品人人爽 | 成人欧美日韩国产 | 国产高清视频免费最新在线 | 亚洲综合爱 | 久久精品在线免费观看 | 欧美国产日韩久久 | 亚洲精选视频在线 | 久草视频资源 | 日韩欧美国产精品 | 操操爽 | 亚洲三级黄色 | 久久情爱| 狠狠色丁香婷婷综合久小说久 | 天天草视频| av黄色一级片 | 日韩欧美综合 | 国产一在线精品一区在线观看 | 色欧美成人精品a∨在线观看 | 久久久久97国产 | 国内精品视频在线播放 | 五月婷婷激情网 | 午夜av免费在线观看 | bbbb操bbbb| 在线免费试看 | 日韩色视频在线观看 | 国产中文字幕网 | 久久噜噜少妇网站 | 久久精品视频日本 | 五月色丁香 | 国产老熟 | 美女视频永久黄网站免费观看国产 | 日韩精品综合在线 | 国产在线播放一区二区 | 91在线精品视频 | 97成人在线观看视频 | 亚洲精品av中文字幕在线在线 | 成人精品亚洲 | 免费看片网页 | 综合色影院 | 91在线视频在线观看 | 国产黄大片 | 日本特黄特色aaa大片免费 | 久久久久亚洲精品国产 | 欧美午夜久久 | 91在线观看视频网站 | 伊人亚洲综合 | 99色亚洲| 国产一线二线三线在线观看 | 国产精品美女免费视频 | 综合天天网| 在线黄网站 | 午夜av免费在线观看 | 日韩精品视频免费在线观看 | 97偷拍在线视频 | 久久久久国产精品午夜一区 | avav片| 国产成人一区二区三区影院在线 | 中午字幕在线观看 | 91原创在线观看 | 在线网站黄 | 91香蕉视频在线 | 免费视频成人 | 国产成人一区二 | 成人av资源站 | 狠狠狠色狠狠色综合 | 欧美日韩国产在线观看 | 天天玩夜夜操 | 91精品久久久久久久久 | 在线黄频 | 久久 亚洲视频 | 久久久久免费精品 | 精品1区2区 | 国产高清免费观看 | 亚洲精品美女久久久久 | 中文字幕日韩国产 | 日韩成人在线一区二区 | 99热精品久久| 日韩欧美一级二级 | 色婷婷www | www.一区二区三区 | 天天曰视频 | 在线观看日本高清mv视频 | 综合色影院 | 日韩精品一区二区三区视频播放 | 国产精品国产三级国产aⅴ9色 | 亚洲 av网站 | 99tvdz@gmail.com| 婷婷六月丁香激情 | 精品主播网红福利资源观看 | 日韩欧美在线免费观看 | 欧美91精品国产自产 | 九九精品久久 | 国产精品va视频 | 国产伦理久久 | 天天干天天做天天爱 | 国产又粗又硬又爽视频 | 极品嫩模被强到高潮呻吟91 | 日本99热 | 伊人天天色| 有码视频在线观看 | 国产精品xxxx18a99 | 国产精品女人久久久久久 | 亚洲国产色一区 | 日本三级在线观看中文字 | 毛片一区二区 | 91久久丝袜国产露脸动漫 | 国产精品嫩草69影院 | 亚洲国产97在线精品一区 | 欧美日韩国产在线观看 | 色综合久久中文综合久久牛 | 欧美日韩国产网站 | 亚洲国产精品成人精品 | 最近中文字幕大全中文字幕免费 | 免费黄在线看 | 国产精品岛国久久久久久久久红粉 | av在线进入 | 四虎成人网 | 欧美日韩精品二区第二页 | 91片黄在线观看 | av专区在线| 天天夜夜亚洲 | 国内精品久久久久久久久久 | 久久er99热精品一区二区 | 国产欧美精品一区二区三区四区 | 最近免费中文字幕大全高清10 | 亚洲综合丁香 | 911国产精品 | 日韩三级不卡 | 天堂av色婷婷一区二区三区 | 欧美日在线观看 | 久久精品一二三 | 久草综合视频 | 国产午夜精品在线 | 久久伦理电影网 | 久久精品久久精品久久精品 | 丁香婷婷成人 | 久久久久久久网 | 福利视频精品 | 日产中文字幕 | 九九在线国产视频 | 国产精品女同一区二区三区久久夜 | 国产成人av一区二区三区在线观看 | 黄色av成人在线观看 | 亚洲综合视频在线观看 | 在线中文日韩 | 人人爱人人添 | 精品免费久久久久久 | 精品999 | 日韩国产精品一区 | 免费久久99精品国产 | 天天操比 | 免费网址你懂的 | 国产在线观看中文字幕 | 中文字幕av全部资源www中文字幕在线观看 | 午夜久久久久久久 | 美女黄频网站 | 天天曰夜夜操 | 美女网站久久 | 伊人超碰在线 | 国产日韩欧美在线看 | 伊人资源站 | 久草网站在线 | 亚洲激情 在线 | 最新真实国产在线视频 | 国产在线探花 | 三级性生活视频 | 成人a免费看 | 热热热热热色 | 久久91久久久久麻豆精品 | 久草在线视频中文 | 国产一卡二卡在线 | 国产精品久久久久久久久久久久冷 | 国产精品不卡视频 | 婷婷国产视频 | www黄com | 九九热免费在线观看 | 一区二区av | 免费h在线观看 | 欧美成亚洲 | 黄色免费大片 | 国产精品久久久久永久免费 | 在线成人欧美 | 日韩中文字幕第一页 | 国产成人精品网站 | 3d黄动漫免费看 | 亚洲在线| 中文字幕在线观看日本 | 天堂av在线网址 | 亚州精品视频 | 免费视频你懂的 | 国产资源站| 99riav1国产精品视频 | 亚洲精品99久久久久中文字幕 | 亚洲综合欧美精品电影 | 97超碰中文字幕 | 国产一级二级在线播放 | 国产剧情在线一区 | 亚洲精品中文字幕在线 | 亚洲播播 | 99riav1国产精品视频 | 日韩欧美一区二区三区视频 | 午夜免费视频网站 | 97精品视频在线 | 精品视频免费播放 | 欧美日韩亚洲国产一区 | 成人avav | 日韩精品一区二区免费视频 | 99在线视频免费观看 | 亚洲国产精品影院 | 欧美日韩亚洲在线观看 | 亚洲夜夜综合 | 久久精品国产亚洲a | 人人插人人费 | 久操免费视频 | 欧美日韩中 | 日韩亚洲在线 | 91亚洲视频在线观看 | 欧美日韩一区二区视频在线观看 | 97视频网址 | 日日天天干 | 日本三级中文字幕在线观看 | a视频在线观看 | 亚洲精品五月天 | 免费av在线| 免费v片 | 国产精品成人一区二区三区吃奶 | 久久久综合色 | 在线观看日韩av | 摸bbb搡bbb搡bbbb | 成人丁香花 | 亚洲人xxx| 麻豆视频免费版 | 91成人免费在线视频 | 国产精品激情 | 黄色av电影免费观看 | 99精品视频免费全部在线 | 国产偷v国产偷∨精品视频 在线草 | 国产精品美女 | 91视频啪 | 久久91网 | 亚洲v欧美v国产v在线观看 | 人人爽人人爽人人片av免 | av电影av在线 | 丝袜一区在线 | 狠狠躁日日躁狂躁夜夜躁 | 激情六月婷婷久久 | 国产拍在线 | 国产精品手机在线 | 成人在线超碰 | 亚洲男人天堂a | 99热在线看 | 国产视频二区三区 | 日韩一区二区三区不卡 | 国产精品午夜免费福利视频 | 人人看人人草 | 国产视频 久久久 | 久久久久久久久久影院 | 在线观看韩日电影免费 | 欧美欧美| 国产精品私人影院 | 99精品国产兔费观看久久99 | 久操视频在线观看 | 五月花激情 | 一本—道久久a久久精品蜜桃 | 国产一区二区在线免费观看 | 在线91播放 | 深爱激情综合网 | 蜜桃视频色 | 国产91影视 | 国产中文字幕视频在线观看 | 日韩视频免费在线观看 | 欧美精品久久久久久久久免 | 久久国产精品免费一区二区三区 | 久久视频这里有精品 | 99在线热播 | 亚洲精品乱码久久久久久蜜桃不爽 | 日韩com | 808电影 | 国产精品99爱| av国产网站| 日韩欧美网址 | 久久综合爱 | 免费久草视频 | 97夜夜澡人人双人人人喊 | 久久免费片| 成人久久久久久久久 | 狠狠亚洲 | 狠狠色噜噜狠狠狠狠2021天天 | 亚洲午夜不卡 | 91天天视频 | 99tvdz@gmail.com| 在线电影av| 国产中文字幕视频在线观看 | 国产在线无 | 国产精品高清免费在线观看 | 欧美网址在线观看 | 国产91精品久久久久 | 日本最大色倩网站www | 一级黄视频 | 亚州国产精品视频 | 久久99偷拍视频 | 99久久精品无码一区二区毛片 | 国产在线欧美在线 | 天天撸夜夜操 | 国产精品久久久久av免费 | 亚洲春色综合另类校园电影 | 久久综合五月天 | 国产精品欧美久久久久三级 | 国产一级91 | 97超视频免费观看 | 成人免费91 | 亚洲 欧美 国产 va在线影院 | 国产又粗又猛又色 | 超碰免费97 | 精品国模一区二区 | 中文字幕日韩高清 | 亚洲乱码精品久久久久 | 欧美性色综合网站 | 国产一区欧美一区 | 热久久国产| 免费在线观看av网站 | 丁香六月婷婷综合 | 91免费观看视频网站 | 国产精品亚洲综合久久 | 天天射天天射天天 | 亚洲精品乱码久久久久久蜜桃91 | www.五月婷婷.com | 亚洲最大色| 黄色网在线播放 | 免费在线黄| 免费人成在线观看网站 | 91成人网页版 | 欧美日韩国产精品一区 | 免费国产在线精品 | 亚州国产视频 | 在线 日韩 av| 日韩午夜av电影 | 在线国产精品视频 | 91插插插免费视频 | 伊人国产在线播放 | 一区二区三区日韩在线 | 亚洲激情在线观看 | 黄a在线看| 国产精品99在线播放 | 国产日韩精品一区二区在线观看播放 | av高清免费 | 综合婷婷丁香 | 免费观看一级视频 | 免费看成人片 | 亚洲精品美女 | 亚洲精品视频在线播放 | 少妇视频在线播放 | 69国产成人综合久久精品欧美 | av电影免费在线播放 | 婷婷深爱 | 夜夜爽88888免费视频4848 | 国产黄a三级三级 | 国产亚洲精品中文字幕 | 国产精品久久99 | 色婷婷激情网 | 国产精品入口66mio女同 | 国产色在线观看 | 中文字幕精品三区 | 五月激情五月激情 | 99精品99| 国产午夜影院 | 男女激情麻豆 | 在线观av| 国产中文在线字幕 | 2019中文最近的2019中文在线 | 日本中文字幕观看 | 在线之家官网 | 欧美日韩视频一区二区 | 亚洲视频免费在线观看 | 国产美女视频免费观看的网站 | 麻豆视频在线免费看 | 一本之道乱码区 | 天天干 夜夜操 | 中文字幕有码在线播放 | 2018亚洲男人天堂 | 国产欧美三级 | 亚州中文av | 国产精品免费视频观看 | 国产精品四虎 | 亚洲电影一级黄 | 天天操夜 | 国产精品日韩高清 | 久草网站在线观看 | 国产成人333kkk | 国产精品理论片在线播放 | 亚洲国产午夜精品 | 久久精品国产免费看久久精品 | 91亚洲欧美激情 | 在线观看黄色 | 国产r级在线观看 | 精品国产精品国产偷麻豆 | 免费观看一级一片 | 久久色视频 | 天天干天天拍 | 日本女人在线观看 | 国产小视频在线 | 国产视频精选 | 一区二区三区电影 | 成人av日韩 | 天天干夜夜 | 人人看人人艹 | 狠狠色丁香婷婷综合视频 | 天天干夜夜夜操天 | 久久精品网址 | 亚洲精品国产精品国自产观看 | 欧美精品在线视频 | av综合站 | 91看成人| 在线观看视频在线观看 | 久久久免费高清视频 | 天天干一干| 黄色在线免费观看网址 | 97色婷婷 | 人人看看人人 | 成人免费观看网址 | 免费网站在线观看人 | 91福利影院在线观看 | 在线观看日韩 | 国产精品久久精品国产 | 日韩精品在线免费播放 | 999久久国产 | 久久欧美综合 | 久久精品小视频 | 国产精品久久免费看 | 国产三级av在线 | 狠狠干婷婷 | 久久久久9999亚洲精品 | 久久99精品波多结衣一区 | 亚洲电影在线看 | av中文字幕在线免费观看 | 亚洲一区天堂 | 日韩激情第一页 | 久久国产影院 | 亚洲精品国产第一综合99久久 | 国产福利不卡视频 | 怡红院久久 | 蜜臀aⅴ精品一区二区三区 久久视屏网 | 国产99精品在线观看 | 综合久久五月天 | 久久国产精品一二三区 | 国产九九九视频 |