-
复杂系统中群体合作行为的涌现一直备受关注,是复杂性科学领域中研究热点之一。通过将复杂网络理论和演化博弈理论相结合的方法,对各种复杂系统中的关系进行模拟,为人们研究现实世界中群体合作行为提供了有力的理论支持。复杂网络上的演化博弈研究始于对规则网络上的博弈行为的探讨[1],随着“小世界”网络模型[2]和“无标度”网络模型[3]的提出,研究逐渐从关注规则网络上的博弈行为发展到关注“小世界”与“无标度”网络模型上的博弈行为,并产生了丰富的理论成果[4-14]。随着研究的深入,人们认识到现实世界中的网络并非独立存在,它们之间往往存在各种各样的联系,相依型多层网络(interdependent networks)的概念由此提出[15]。网络结构是影响网络演化博弈行为的重要因素,相依型多层网络模型提出之后,其上的演化博弈研究成为当前网络科学研究的前沿问题。
文献[16]在由规模相同的网络构成的相依型网络模型上引入公共品博弈,研究了概率连接对整个系统中合作行为的影响以及相依型网络不同网络层间的耦合关系,实验结果发现,存在一个中等大小的连接概率使得系统中的合作者水平达到最优。文献[17]研究了由效用函数构造的相依型网络上的公共合作问题,研究结果发现,效用函数的偏置性越强,公共合作水平越高。文献[18]借助相依型多层网络描述个体所具有的不同社会关系,通过在每一层网络上进行囚徒博弈的动力学演化研究,发现在较大的背叛诱惑参数下,相依型多层网络结构会增大合作行为的韧性,而这种韧性实质上是由一些重要的跨网络层的合作行为构成。文献[19]在相依型多层网络的不同网络之间引入囚徒博弈和雪堆博弈,网络中的节点以概率$p$学习同一层邻居的策略,以概率$1 - p$学习相邻层邻居的策略。研究发现,当学习概率$p$的值从$p = 1$处开始下降时,有利于促进采用囚徒博弈策略的群体内的合作,而采用雪堆博弈群体内的合作水平会随之降低。文献[20]研究相依型网络上的囚徒博弈,发现囚徒博弈可以提高系统整体的合作水平,同时也发现了该网络模型下背叛领袖与合作领袖的互动机理。文献[21]研究了相依型网络上小团体的合作行为演化在人群疏散过程中的应用,通过令不同网络层上的小团体内部成员之间以及不同小团体的成员之间采用不同的博弈策略,研究了链路的比例和强度对合作演化行为的影响。文献[22]对相依型多层网络上的演化博弈研究进行了回顾和梳理,概述了单层和多层网络之间最显著的概念差异,提供了基本的定义和分类的最常用术语。最后强调指出,模式的形成和集体行为对于促进在不利条件下的合作行为的重要性。文献[23]研究了由两个耦合的方格网组成的相依型网络上基于记忆的囚徒博弈,研究结果发现,存在一个最优记忆长度和依存强度区间可以极大提高合作者的比例,同时研究也指出网络模型上的节点是否具有记忆能力,是否具有外部连接,都将对节点的演化行为产生重要影响。
受到以上研究启发,本文提出了由Holme- Kim[24]网络构建相依型网络的算法,并依此算法构建了由两个同等规模Holme-Kim网络组成的相依型网络。由于网络结构是影响其上合作行为的重要因素,故本文在该网络模型基础上引入囚徒困境博弈模型,研究了算法模型中的连接度参数$n$与连接概率$p$对网络上合作行为的影响,同时还研究了囚徒困境收益矩阵中参数$b$(背叛的诱惑)的改变对合作行为产生的影响。
-
现实世界中的复杂网络系统往往具有无标度、高聚类的特点。为模拟这些特点,Holme和Kim构造了一种可调聚类系数的Holme-Kim网络模型(HK)。HK网络构造过程算法如下。
1) 初始状态:网络中有${m_0}$个全连通的节点;
2) 增长机制:每一时间步,一个具有$m$条边的节点$i$加入网络。节点$i$的第一条边按照度优先规则连接到网络中已存在的节点$j$,即选择节点$j$进行连接的概率为:
$$ \prod\nolimits_{j}{={{{k}_{j}}}/{\sum\limits_{l=1}^{n}{{{k}_{l}}}}\;} $$ 3) 其余$m - 1$条边以概率${p_t}$随机连接到节点$j$的邻居上,否则以概率$1 - {p_t}$在全网络中使用度优先规则进行连接。
根据以上网络模型构造算法的仿真图如图 1所示。
图 1a中网络初始状态${m_0} = 10$,$m = 4$,${p_t} = 0.6$,最终生成的网络规模$N = 12{\text{ }}000$。图 1b中网络初始状态${m_0} = 10$,$m = 4$,最终生成网络规模$N = 5{\text{ }}000$,图中每一个数据是10组独立运算取平均值后所得到的结果。由仿真结果可见,HK网络模型同时具有无标度、高聚类等现实网络所具有的特点,且其聚类系数的值会随着概率${p_t}$的值增大而增大。当${p_t} = 0$时,HK网络即退化为BA网络[3]。HK网络模型提出后,许多学者研究了该网络的高聚类特性对其上的演化博弈的影响。例如,文献[25]研究了HK网络上的公共品博弈,揭示了网络聚类结构的反馈互惠机制。文献[26]对单层HK网络上的演化博弈行为进行了总结性阐释。
鉴于HK模型可以再现真实网络的这些特点,本文提出一种基于HK网络的相依型HK网络模型,其网络模型由两个HK网络层构成。这两个网络层上的节点之间通过随机性概率$p$进行连接。通过这种不同层节点之间的连接,两个HK网络之间具有了交互性,进而可以在该模型基础上研究合作行为是如何进行演化的。为了方便研究,具体化网络构成的条件如下:HK_A和HK_B是两个规模为$N$的HK网络层,HK_A上的每个节点与HK_B上的随机$n(1 \leqslant n \leqslant N)$个节点以概率$p$进行连接,其中$n$与$p$分别称为连接度与连接概率。其结构如图 2所示。
考虑到在实际网络中,一个网络层上的节点在另一层网络中相“熟识”的节点往往不会太多,所以$n$的值通常不会太大,且应$n \ll N$。由上述的建模过程可以看出,参数$n$与$p$的值决定了不同网络层之间存在多少连接,故可用这两个参数值对两个HK网络层之间耦合程度进行衡量。用参数$k$表示两个网络之间存在的连接数量。当参数$n$的值固定时,可以通过讨论参数$p$的值决定网络层间的耦合强度。当$p = 0$时,$k = 0$,两个HK网络是相互独立的网络层,它们之间不存在连接。当$0 < p < 1$时,$k$服从二项分布,$k$~$B(nN, p)$,$0 \leqslant k \leqslant nN$。当$p = 1$时,$k = nN$,HK_A中的每一个节点都与HK_B中的$n$个节点存在连接。通过构建这样结构的网络模型,在此基础上引入囚徒博弈模型,对该网络模型上的合作演化行为进行分析与研究。
-
在囚徒困境博弈模型(prisoner’s dilemma game, PDG)中,每个参与者都有合作(cooperation, C)与背叛(defection,D)两种策略可供选择。参与者的收益矩阵如下:
$$\begin{array}{*{20}{c}} {}&{\begin{array}{*{20}{c}} C&D \end{array}} \\ {\begin{array}{*{20}{c}} C \\ D \end{array}}&{\left[ {\begin{array}{*{20}{c}} R&S \\ T&P \end{array}} \right]} \end{array}$$ 式中,最左侧一列代表自己的选择,最上面一行代表对方的选择;$R$为$(C, C)$策略组合中,选择$C$策略的参与者所获得的收益;$S$为$(C, D)$策略组合中,选择$C$策略的参与者所获得的收益;$T$为$(D, C)$策略组合中,选择$D$策略的参与者所获得的收益;$P$为$(D, D)$策略组合中,采用$D$策略的参与者所获得的收益。且满足$T > R > P > S$,$2R > T + S$。其中$R$、$S$、$T$、$P$分别被称为“合作的奖励”、“傻瓜的报酬”、“背叛的诱惑”、“背叛的惩罚”。基于该收益矩阵,理性的参与者一定会选择背叛策略作为自己的最佳策略,然而就总体而言只有博弈双方都选择合作策略才能使整体的收益最大化。这种个人利益与整体利益的选择冲突,在博弈论中也被成为社会两难选择(social dilemma)。
在本文的网络博弈演化过程中,使用简化后的单参数囚徒博弈模型[1],其收益矩阵如下:
$$\mathit{\boldsymbol{W}} = \left[ {\begin{array}{*{20}{c}} 1&0 \\ b&0 \end{array}} \right]~~~~~~~~~b>1$$ (1) 在该单参数模型中参数$R = 1$、$P = 0$、$S = 0$,参数$T = b$为变量。故参数$T$的不同取值可以影响网络上的合作行为,是本文需要考察的一个重要变量。
-
网络中每一个节点视为一个博弈个体,C为博弈个体所采用的策略,其取值为${\left[ {1{\text{ 0}}} \right]^{\text{T}}}$(代表合作)或${\left[ {0{\text{ 1}}} \right]^{\text{T}}}$(代表背叛)。网络模型初始时合作与背叛策略均匀分布在网络中。在每一轮博弈过程中,个体$i$与其所有邻居进行一次博弈(这里的所有邻居既包括与节点$i$处于同一网络层且直接相连的节点,还有可能包括与节点$i$处于不同网络层以概率$p$进行连接的节点),所得的累计收益总和为:
$${U_i} = \sum\limits_{j \in {\mathit{\Omega } _i}} {\mathit{\boldsymbol{C}}_i^{\text{T}}\mathit{\boldsymbol{W}}{\mathit{\boldsymbol{C}}_j}} $$ (2) 式中,${\mathit{\Omega } _i}$为$i$的所有邻居节点集合;$j$为$i$的邻节点。
完成本轮博弈后,个体$i$从所有邻居中随机选择一个邻居$j$,并比较两者收益。若有${U_i} < {U_j}$,则个体$i$以概率${p_{i \leftarrow j}}$采用$j$的策略作为自己在下一轮博弈中所使用的策略。
$${p_{i \leftarrow j}} = \frac{{{U_j} - {U_i}}}{{D * \max ({k_i}, {k_j})}}$$ (3) 式中,$\max ({k_i}, {k_j})$表示个体$i$与个体$j$的度的最大者;$D$为收益矩阵中最大参数与最小参数之差,其作用相当于归一化因子,以确保概率${p_{i \leftarrow j}}$的值不超过1。本文中使用的收益矩阵为式(1),则有$D = T - S = b$。
此外合作者密度是衡量网络博弈行为的重要物理量。随着网络博弈的进行,网络中采取合作策略的节点的比例不再发生变化或者变化值小于一个极小的阈值时,网络的运动状态进入或者逐渐进入合作稳定状态。本文用${f_c}(t)$表示在$t$时刻相依型HK网络中合作者的密度,${f_{{c_1}}}(t)$与${f_{{c_2}}}(t)$分别表示HK_A网络与HK_B网络中$t$时刻合作者密度。$C_1^i(t)$表示$t$时刻HK_A网络中节点$i$所采用的策略,其值取0或1。同理$C_2^j(t)$表示$t$时刻HK_B网络中节点$j$所采用的策略,其值取0或1。则相依型HK网络在$t$时刻合作者密度可以表示为:
$$\begin{gathered} {f_c}(t) = \frac{{\sum\limits_{i = 1}^N {C_1^i(t)} + \sum\limits_{j = 1}^N {C_2^j(t)} }}{{2N}} = \\ \frac{1}{{2N}}\sum\limits_{l = 1}^2 {\sum\limits_{i = 1}^N {C_l^i(t)} } \\ \end{gathered} $$ (4)
Research on Cooperative Behavior of Interdependent Two-Layer Holme-Kim Network
-
摘要: 现实世界中的网络往往具有“无标度”、“高聚类”、“相互连接”的特点。为模拟这些特点,该文提出了一种相依型Holme-Kim网络构造算法,并分析了囚徒困境博弈在该算法构造的网络模型上的演化。通过仿真实验,研究了构造算法中提出的连接度、连接概率以及囚徒困境收益矩阵中背叛诱惑等参数对相依型网络上合作行为演化的影响。研究发现在较低的背叛诱惑参数下,同等规模的网络上连接度、连接概率的值越低越有利于相依型网络上合作行为的形成;当背叛诱惑参数超过一定的阈值,会导致网络中大量背叛行为的出现。
-
关键词:
- 合作行为 /
- 演化博弈 /
- Holme-Kim网络 /
- 相依型网络
Abstract: In the real world, networks often have "scale-free", "high clustering" and "interconnection" features. In order to model these characteristics, we proposes an algorithm for constructing the interdependent Holme-Kim network and use tools of complex networks and evolutionary game theory to research the emergence of cooperation in our network model, where a Prisoner's Dilemma game is played. Through simulation experiments, the effects of the connection degree, the connection probability mentioned in the algorithm and the temptation to defect in the payoff matrix of the Prisoner's Dilemma game are studied. Our results show that the lower the connection degree and the connection probability on the same scale of the network, the easier the formation of cooperative behavior on the network. When the parameter of the temptation to defect is more than a certain threshold, a great number of defectors will be on the networks.-
Key words:
- cooperation behavior /
- evolutionary game /
- Holme-Kim network /
- interdependent networks
-
[1] NOWAK M A, MAY R M. Evolutionary games and spatial chaos[J]. Nature, 1992, 359(6398):826-829. doi: 10.1038/359826a0 [2] WATTS D J, STROGATZ S H. Collective dynamics of small-world networks[J]. Nature, 1998, 393(3):440-442. http://d.old.wanfangdata.com.cn/OAPaper/oai_arXiv.org_cond-mat%2f0505086 [3] BARABÁSI A L, ALBERT R, JEONG H. Mean-field theory for scale-free random networks[J]. Physica A:Statistical Mechanics & Its Applications, 1999, 272(1-2):173-187. http://d.old.wanfangdata.com.cn/OAPaper/oai_arXiv.org_cond-mat%2f0701275 [4] WATTS D J, STROGATZ S H. Collective dynamics of 'small-world' networks[J]. Nature, 1998, 393(6684):440-442. doi: 10.1038/30918 [5] SANTOS F C, PACHECO J M. Scale-free networks provide a unifying framework for the emergence of cooperation[J]. Physical Review Letters, 2005, 95(9):098104. doi: 10.1103/PhysRevLett.95.098104 [6] SANTOS F C, RODRIGUES J F, PACHECO J M. Graph topology plays a determinant role in the evolution of cooperation[J]. Proceedings of the Royal Society of London B:Biological Sciences, 2006, 273(1582):51-55. doi: 10.1098/rspb.2005.3272 [7] FU Feng, LIU Liang-huan, WANG Long. Evolutionary prisoner's dilemma on heterogeneous Newman-Watts small-world network[J]. The European Physical Journal B, 2007, 56(4):367-372. doi: 10.1140/epjb/e2007-00124-5 [8] ASSENZA S, GÓMEZ-GARDEÑES J, LATORA V. Enhancement of cooperation in highly clustered scale-free networks[J]. Physical Review E, 2008, 78(1):017101. doi: 10.1103/PhysRevE.78.017101 [9] DU Wen-bo, CAO Xian-bin, ZHAO Lin, et al. Evolutionary games on scale-free networks with a preferential selection mechanism[J]. Physica A:Statistical Mechanics and its Applications, 2009, 388(20):4509-4514. doi: 10.1016/j.physa.2009.07.012 [10] DU Wen-bo, CAO Xian-bin, ZHAO Lin, et al. Evolutionary games on weighted Newman-Watts small-world networks[J]. Chinese Physics Letters, 2009, 26(5):058701. doi: 10.1088/0256-307X/26/5/058701 [11] PONCELA J, GÓMEZ-GARDENES J, MORENO Y. Cooperation in scale-free networks with limited associative capacities[J]. Physical Review E, 2011, 83(5):057101. doi: 10.1103/PhysRevE.83.057101 [12] YANG Han-xin, WU Zhi-xi, DU Wen-bo. Evolutionary games on scale-free networks with tunable degree distribution[J]. EPL (Europhysics Letters), 2012, 99(1):10006. doi: 10.1209/0295-5075/99/10006 [13] WANG Long, CONG Rui, LI Kun. Feedback mechanism in cooperation evolving[J]. Scientia Sinica Informationis, 2014, 44(12):1495-1514. http://en.cnki.com.cn/Article_en/CJFDTOTAL-PZKX201412001.htm [14] SCATÀ M, DI STEFANO A, LA CORTE A, et al. Combining evolutionary game theory and network theory to analyze human cooperation patterns[J]. Chaos, Solitons & Fractals, 2016, 91:17-24. http://www.wanfangdata.com.cn/details/detail.do?_type=perio&id=b4160be3860c578dd411efa722f6de35 [15] BULDYREV S V, PARSHANI R, PAUL G, et al. Catastrophic cascade of failures in interdependent networks[J]. Nature, 2010, 464(7291):1025-1028. doi: 10.1038/nature08932 [16] WANG Bao-kui, CHEN Xiao-jie, WANG Long. Probabilistic interconnection between interdependent networks promotes cooperation in the public goods game[J]. Computer Science, 2012(11):P11017. http://d.old.wanfangdata.com.cn/OAPaper/oai_arXiv.org_1208.0468 [17] WANG Zhen, SZOLNOKI A, PERC M. Evolution of public cooperation on interdependent networks:the impact of biased utility functions[J]. Epl, 2012, 97(4):48001. doi: 10.1209/0295-5075/97/48001 [18] GÓMEZGARDEÑES J, REINARES I, ARENAS A, et al. Evolution of cooperation in multiplex networks[J]. Scientific Reports, 2012(2):620. http://comnet.oxfordjournals.org/external-ref?access_num=10.1038/srep00620&link_type=DOI [19] SANTOS M D. Biased imitation in coupled evolutionary games in interdependent networks[J]. Scientific Reports, 2014, 4(4):4436. http://www.ncbi.nlm.nih.gov/pubmed/24658580 [20] XIANG Hai-tao, LIANG Shi-dong. Evolutionary gambling dynamics for two growing complex networks[J]. Acta Physica Sincia, 2015(1):418-426. http://d.old.wanfangdata.com.cn/Periodical/wlxb201501056 [21] HUANG Ke-ke, CHENG Yuan, ZHENG Xiao-ping, et al. Cooperative behavior evolution of small groups on interconnected networks[J]. Chaos Solitons & Fractals the Interdisciplinary Journal of Nonlinear Science & Nonequilibrium & Complex Phenomena, 2015, 80:90-95. http://www.wanfangdata.com.cn/details/detail.do?_type=perio&id=aa4a7c955d56c7f8c6321d8baf5faf82 [22] WANG Zhen, WANG Lin, SZOLNOKI A, et al. Evolutionary games on multilayer networks:a colloquium[J]. The European Physical Journal B, 2015, 88(5):124. doi: 10.1140/epjb/e2015-60270-7 [23] LUO Chao, ZHANG Xiao-lin, LIU Hong, et al. Cooperation in memory-based prisoner's dilemma game on interdependent networks[J]. Physica A:Statistical Mechanics & Its Applications, 2016, 450:560-569. http://www.wanfangdata.com.cn/details/detail.do?_type=perio&id=abd312a400798cf4637e62d9f57e4396 [24] HOLME P, KIM B J. Growing scale-free networks with tunable clustering[J]. Physical Review E Statistical Nonlinear & Soft Matter Physics, 2001, 65(2):95-129. http://www.ncbi.nlm.nih.gov/pubmed/11863587 [25] RONG Zhi-hai, YANG Han-xin, WANG Wen-xu. Feedback reciprocity mechanism promotes the cooperation of highly clustered scale-free networks[J]. Physical Review E Statistical Nonlinear & Soft Matter Physics, 2010, 82(2):047101. doi: 10.1103-PhysRevE.82.047101/ [26] 荣智海, 吴枝喜, 王文旭.共演化博弈下网络合作动力学研究进展[J].电子科技大学学报, 2013, 42(1):10-22. http://manu50.magtech.com.cn/dzkjdx/CN/abstract/abstract527.shtml RONG Zhi-hai, WU Zhi-xi, WANG Wen-xu. Research on the networked cooperative dynamics of coevolutionary games[J]. Journal of University of Electronic Science & Technology of China, 2013, 41(1):10-22. http://manu50.magtech.com.cn/dzkjdx/CN/abstract/abstract527.shtml [27] RONG Zhi-hai, LI Xiang, WANG Xiao-fan. Roles of mixing patterns in cooperation on a scale-free networked game[J]. Physical Review E Statistical Nonlinear & Soft Matter Physics, 2007, 76(2):027101. http://www.wanfangdata.com.cn/details/detail.do?_type=perio&id=b89d82a953eabf7a0c01f6d81147fe19 [28] RONG Zhi-hai, WU Zhi-xi. Effect of the degree correlation in public goods game on scale-free networks[J]. EPL, 2009, 87(3):30001. doi: 10.1209/0295-5075/87/30001