人工智能第12章群智能.pptx
《人工智能第12章群智能.pptx》由会员分享,可在线阅读,更多相关《人工智能第12章群智能.pptx(73页珍藏版)》请在三一办公上搜索。
1、人工智能,第十二章 群智能,12.1 群智能概述12.2 蚁群算法12.3 粒子群优化算法12.4 其他群智能优化算法,群智能(Swarm Intelligence,SI)优化算法通过模拟自然界中的昆虫、鸟群、鱼群等“社会性”生物群体的行为特征,利用群体性生物能够不断学习自身经验与其他个体经验的特性,在寻优过程中不断获取和积累寻优空间的知识,自适应地进行搜索寻优,从而得到最优解或准有解。群智能优化算法作为一种新兴的演化计算技术,具有较强的自学习性、自适应性、自组织性等智能特征,算法结构简单、收敛速度快、全局收敛性好,在旅行商问题、图着色问题、车间调度问题、数据聚类问题等领域得到广泛的应用,与进
2、化算法和人工神经网络并称为人工智能领域的三驾马车。,12.1 群智能概述,自然界中的群体生物,具有惊人的完成复杂行为的能力,群智能优化算法则是国内外研究学者受到群体生物的社会行为启发而提出。其中提出时间最早、应用最为广泛的群智能优化算法主要是模拟蚂蚁觅食行为的蚁群算法(Ant Colony Optimization,ACO)和模拟鸟类觅食行为的粒子群优化算法(Particle Swarm Optimization,PSO)。,12.1.1 群智能优化算法定义,鸟群通过协作进行捕食,房间偏僻角落里的蛋糕总会先被蚂蚁发现,鱼聚集成群可以有效的逃避捕食者,群智能优化算法主要源于对自然界中群体生物觅食
3、等行为的模拟,每个具有经验和智慧的个体通过相互作用机制形成强大的群体智慧来解决复杂问题。其主要算法流程如下。将寻优过程模拟成生物个体的觅食等行为过程,用搜索空间中的点模拟自然界中的生物个体;将求解问题的目标函数量化为生物个体对环境的适应能力;将生物个体觅食等行为过程类比为传统寻优方法用较优的可行解取代较差可行解的迭代过程,从而演化成为一种具有“生成+检验”特征的迭代搜索算法,是一种求解极值问题的自适应人工智能技术。,群智能主要算法流程,12.1.2 群智能优化算法原理,自然界中的昆虫、鸟群、鱼群等一些生物具有群体性的行为特征,计算机图形学家雷诺兹(C.Reynolds)认为以群落形式生存的生物
4、在觅食时一般遵循以下三个规则。1)分隔规则:尽可能避免与周边生物个体距离太近,造成拥挤;2)对准规则:尽可能与周边生物个体的平均移动方向保持一致,向目标方向移动;3)内聚规则:尽可能向周边生物个体的中心移动。,上述规则中,分隔规则体现出生物的个体信息特征,即个体根据自身当前状态进行决策;对准规则和内聚规则体现生物的群体信息特征,即个体根据群体状态进行决策。除个体信息与群体信息特征,生物行为还具有适应性、盲目性、自治性、突现性、并行性等特征。群智能优化算法就是利用雷诺兹模型模拟整个生物群体的行为,算法在迭代过程中不断利用个体最优值与群体最优值进行寻优搜索,完成个体信息与群体信息的交互。在群智能优
5、化算法中,个体最优值的随机性使得算法搜索方向具有多样性,能够避免算法收敛过早陷入局部最优;群体最优值能够把握全局寻优方向,提高算法的全局寻优能力,及时收敛。,12.1.3 群智能优化算法特点,群智能优化算法主要用来求解一些复杂的、难以用传统算法解决的问题。与传统优化算法不同,群智能优化算法是一种概率搜索算法,具有以下几个特点。具有较强的鲁棒性,群体中相互作用的个体是分布式的,没有直接的控制中心,不会因少数个体出现故障而影响对问题的求解。结构简单,易于实现,每个个体只能感知局部信息,个体遵循的规则简单。易于扩充,开销较少。具有自组织性,群体表现出的智能复杂行为由简单个体交互而来。,12.2 蚁群
6、算法,蚁群算法,又称为蚂蚁算法,1992年多里戈(M.Dorigo)受自然界中真实蚁群的群体觅食行为启发提出,是最早的群智能优化算法,起初被用来求解旅行商(Total Suspended Particulate,TSP)问题。,12.2.1 蚁群算法概述,蚂蚁是一种社会性生物,在寻找食物时,会在经过的路径上释放一种信息素,一定范围内的蚂蚁能够感觉到这种信息素,并移动到信息素浓度高的方向,因此蚁群通过蚂蚁个体的交互能够表现出复杂的行为特征。蚁群的群体性行为能够看作是一种正反馈现象,因此蚁群行为又可以被理解成增强型学习系统(Reinforcement Learning System)。,12.2.
7、2 蚁群算法的数学模型,蚁群优化算法的第一个应用是著名的旅行商问题。,旅行商问题,蚁群系统模型,旅行商问题(Traveling Salesman Problem,TSP):在寻求单一旅行者由起点出发,通过所有给定的需求点之后,最后再回到原点的最小路径成本。,蚂蚁搜索食物的过程:通过个体之间的信息交流与相互协作最终找到从蚁穴到食物源的最短路径。,符号表示,m 是蚁群中蚂蚁的数量;表示结点i(城市)和结点j(城市)之间的距离;表示t时刻在ij连线上残留的信息素,初始时刻,各条路径上 的信息素相等,蚂蚁k在运动过程中,根据各条路径上的信息 素决定转移方向。称为启发信息函数,等于距离的倒数;,表示在t
8、时刻蚂蚁 k 选择从结点(城市)i 转移到结点(城 市)j的概率,也称为随机比例规则。,信息素,局部启发信息,表示蚂蚁k下一步允许选择的城市 记录蚂蚁k当前所走过的城市 是信息素启发式因子,表示轨迹的相对重要性 表示期望启发式因子,表示能见度的相对重要程度,1-表示信息素残留因子,常数 为信息素挥发因子,表示路径上信息素的损耗程度;的大小关系到算法的全局搜索能力和收敛速度。蚂蚁完成一次循环,各路径上信息素浓度挥发规则为:蚁群的信息素浓度更新规则为:,根据信息素更新策略不同,多里戈提出了3种基本蚁群算法模型。,1、蚁周系统(Ant-cycle System),单只蚂蚁所访问路径上的信息素浓度更新
9、规则为:Q 为常数Lk 为优化问题的目标函数值,表示第k只蚂蚁在本次循环中所走路径的长度。,2、蚁量系统(Ant-quantity System),3、蚁密系统(Ant-density System),三种模型比较,效果最好,通常作为蚁群优化算法的基本模型。,设置参数,初始化信息素浓度While(不满足条件时)dofor蚁群中的每只蚂蚁for每个解构造步骤(直到构造出完整的可行解)1)蚂蚁按照信息素及启发因子构造下一步问题的解;2)进行信息素局部更新。(可选)end forend for1)以已获得的解为起点进行局部搜索;(可选)2)根据已获得的解的质量进行全局信息素更新。end Whilee
10、nd,蚁群算法流程,12.2.3 蚁群算法的改进,为提高蚁群算法性能,诸多研究学者对蚁群算法进行了改进,其中主要包括蚂蚁-Q系统(Ant-Q System)、蚁群系统(Ant Colony System,ACS)、最大-最小蚂蚁系统(Max-Min Ant System,MMAS)、自适应蚁群算法。,蚂蚁-Q系统1995年,意大利学者卢卡(M.Luca)、甘巴德拉(L.M.Gambardella)、多里戈在ACO算法的基础上,进行了创新,提出了蚂蚁-Q系统。,在解构造过程中提出了伪随机比例状态迁移规则;信息素局部更新规则引入强化学习中的Q学习机制;在信息素的全局更新中采用了精英策略。,其概率分
11、布计算、AQ值更新规则分别为:,其中:,1996年,甘巴德拉和多里戈又在Ant-Q算法的基础上提出了蚁群系统,蚁群系统是Ant-Q算法的一种特例。其主要创新如下:,蚁群系统,相比ACO算法,蚁群系统中的蚂蚁在下一步移动之前,增加一次随机实验,将选择情况分成“利用已知信息”和“探索”两类。提出了精英策略(Elitist Strategy)。设置精英蚂蚁数目的最优范围:若低于该范围,增加精英蚂蚁数目,以便能够较快的发现最优路径;若高于该范围,精英蚂蚁会在搜索初期迫使寻优过程停留在次优解附近,降低算法性能。,其中状态转移规则为:,其中,Sk表示蚂蚁k所选中的下一个结点;q是一个随机变量,,为设定阈值
12、。,1997年,德国学者施蒂茨勒(T.Stutzle)提出了最大-最小蚂蚁系统。其主要创新如下:,最大-最小蚂蚁系统,为了避免算法收敛过早,陷入局部最优,将各条路径的信息素浓度限制到min,max区间范围内。采用了平滑机制,路径上信息素浓度的增加与max和当前浓度(i,j)之差成正比,即,其中,0 1。,自适应蚁群算法自适应蚁群算法能够根据搜索结果进行信息素浓度更新,如果算法陷入局部最优,自适应调整陷入局部最优的蚂蚁所经过路径中的信息素和信息素强度Q,使得算法能够较快的跳出局部最优,避免算法“早熟”,同时自适应蚁群算法限定所有路径上的信息素范围,有利于提高算法全局搜索能力。,蚁群算法最早被用来
13、解决旅行商问题,随后陆续被用于解决图着色问题、二次分配问题、大规模集成电路设计、通讯网络中的路由问题以及负载平衡问题、车辆调度问题、数据聚类问题、武器攻击目标分配和优化问题、区域性无线电频率自动分配问题等。,12.2.3 蚁群算法的应用示例,旅行商问题描述如下:假设,为一个加权图,,为顶点集,,为边集。,为顶点i到顶点j的距离,其中,且,,同时,。,经典TSP的数学模型为:,是图s的顶点数。,实际问题可以描述为:一行人要去27个城市旅行,其中城市坐标如表所示,该人从一城市出发,使用蚁群算法计算,应如何选择行进路线,以使总的行程最短。,应用基本蚁群算法进行建模,可计算得出行程最短路径为:城市19
14、城市4城市2城市24城市26城市8城市7城市3城市18城市1城市5城市10城市6城市25城市14城市15城市9城市21城市22城市11城市23城市12城市16城市20城市13城市27城市17。,12.3 粒子群优化算法,粒子群优化算法(Particle Swarm Optimization,PSO)源于对鸟群社会系统的研究,由美国普渡大学的埃伯哈特(J.Eberhart)和肯尼迪(R.Kennedy)于1995年提出。其核心思想是利用个体的信息共享促使群体在问题解空间从无序进行有序演化,最终得到问题的最优解。,可用如下经典描述直观理解粒子群优化算法:设想这么一个场景:一群鸟在寻找食物,在远处有
15、一片玉米地,所有的鸟都不知道玉米地到底在哪里,但是它们知道自己当前的位置距离玉米地有多远。那么找到玉米地的最优策略就是搜寻目前距离玉米地最近的鸟群的所在区域。粒子群优化算法就是从鸟群食物的觅食行为中得到启示,从而构建形成的一种优化方法。,12.3.1 粒子群优化算法基本思想,粒子群优化算法将每个问题的解类比为搜索空间中的一只鸟,称之为“粒子”,问题的最优解对应为鸟群要寻找的“玉米地”。每个粒子设定一个初始位置和速度向量,根据目标函数计算当前所在位置的适应度值(Fitness Value),可以将其理解为距离“玉米地”的距离。粒子在迭代过程中,根据自身的“经验”和群体中的最优粒子的“经验”进行学
16、习,从而确定下一次迭代时飞行的方向和速度。通过逐步迭代,整个群体逐步趋于最优解。,在n 维连续搜索空间中,对粒子群中的第i(i=1,2,m)个粒子进行定义:,:表示搜索空间中粒子的当前位置。,:表示该粒子至今所获得的具有最优适应度 的位置。,:表示该粒子的搜索方向。,12.3.2 粒子群优化算法基本框架,:表示每个粒子经历过的最优位置(Pbest)。,:群体经历过的最优位置(Gbest)。,c1,c2 是速度因子,均为非负值;r1 和 r2 为0,1 范围内的随机数。,早期的粒子群优化算法速度和位置向量更新公式如下:,=1,2,;,由于 的更新过于随机,使得粒子群优化算法具有较强的全局寻优能力
17、,但是局部寻优能力较差。为保证算法具有全局寻优能力的同时,提高其局部寻优能力。1998年Shi Yuhui和埃伯哈特在算法中引入惯性权重(Inertia Weight)系数w,修正了速度向量更新公式:,参数w取值范围为0,1,与物理中的惯性相似,w反映了粒子历史运动状态对当前运动的影响。如果w取值较小,历史运动状态对当前运动影响较小,粒子的速度能够很快的改变;相反,如果w取值较大,虽然提高了搜索空间范围,但是粒子运动方向不易改变,难于向较优位置收敛。因此w设置较大时,能够提高算法全局寻优能力,w设置较小时,又能够加快算法局部寻优。实际工程应用中w可采取自适应取值方式。,粒子群优化算法流程,pr
18、ocedure PSO for 每个粒子i 初始化每个粒子i,随机设置每个粒子的初始位置,和速度,计算每个粒子i的目标函数,Gbest=,end for Gbest=minPbesti while not stop for i=1 to m 更新粒子i的速度和位置 if fit(,)fit(Pbesti)Pbesti=,if fit(Pbesti)fit(Gbest)Gbest=Pbesti;end for end while print Gbestend procedure,12.3.3 粒子群优化算法参数分析与改进,粒子群优化算法中主要参数如下:种群规模m种群规模通常设置为20-40,可根
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 人工智能 12 智能
链接地址:https://www.31ppt.com/p-4416873.html