五子棋AI设计

 

五子棋AI设计——从门外到门内不得不说的事儿1

分类: 人工智能 AI 五子棋 Naive   278人阅读  评论(0)  收藏  举报
mfc 测试

这学期选了人工智能原理,上课的时候完全没搞懂老师要讲什么,所以听课听得云里雾里的,幸好有几个小实验,可以帮助理解人工智能的精髓。

第一个实验就是基于带alpha-beta剪枝的MinMax搜索的五子棋AI设计。好久没有写过MFC界面了,所以在pudn上down了几个例程,测试了一下,选了两个比较规范的工程作为开发的基础。

第一天:Naive AI——一个称不上AI的AI

比对着选好的工程进行复制,在复制的过程中删去一些暂时用不到的功能,就搞出了如下界面。

五子棋AI设计_第1张图片

有了棋盘,让我们开始下棋吧。可是这是我还对五子棋的规则一知半解,是个门外汉。只好采用投石问路的方法,先来个简单的吧,随机生成合法落子位置。

首先将棋盘定义为一个整形的二维数组points[16][16],0表示空,1表示黑子,2表示白子。为什么是16,只是觉得用1-15比用0-14直观一些,其实模仿程序是这么定义的。

那么,什么样的位置是合法的呢?就是棋盘上满足points[i][j] == 0的(i,j)。这样随机生成1-15之间的任意整数x = rand()%15 + 1; y =rand()%15 + 1;建议在两个语句中间加若干空循环,避免x和y一样,提高“随机性”,虽然这个随机性并不怎么样吧。

这样,一个称不上AI的AI诞生了,我们就叫他Naive吧。

观赏Naive下棋是一种享受,因为他的表现比我还差,我可以很轻易的在五步之内秒杀他。

在解决了有无问题后,应该着眼于提高AI的水平,使其成为真的AI。

如何提高,路在何方?且听下回分解。

--------------------分割线--------------------

“AI”代码如下,

[cpp]  view plain copy
  1. void CWuZiQi::Naive( const int points[16][16], bool first, int oldp[16][16], int newp[16][16], int *nx, int *ny )  
  2. {  
  3.     int x, y;  
  4.     int k = 0;  
  5.     // current state quick save  
  6.     for ( int i = 1; i <= 15; i++ )  
  7.         for ( int j = 1; j <= 15; j++ )  
  8.         {  
  9.             oldp[i][j] = points[i][j];  
  10.             newp[i][j] = points[i][j];  
  11.         }  
  12.     // place a chess on board  
  13.     do  
  14.     {  
  15.         for ( int j = 0; j < 1000; j++ )  
  16.             for ( int k = 0; k < j; k++ )  
  17.                 ;  
  18.         x = rand() % 15 + 1;  
  19.         for ( int j = 0; j < 1000; j++ )  
  20.             for ( int k = 0; k < j; k++ )  
  21.                 ;  
  22.         y = rand() % 15 + 1;  
  23.         k++;  
  24.     }while ( oldp[x][y] != 0 || k > 20 );  
  25.     if ( k >= 20 )  
  26.     {  
  27.         *nx = -1; *ny = -1;  
  28.         return;  
  29.     }  
  30.     else  
  31.     {  
  32.         *nx = x; *ny = y;  
  33.     }  
  34.     if ( first )  
  35.     {  
  36.         newp[x][y] = 1;  
  37.     }  
  38.     else  
  39.     {  
  40.         newp[x][y] = 2;  
  41.     }  
  42. }  

五子棋AI设计——从门外到门内不得不说的事儿2

分类: AI wuziq 五子棋 人工智能   235人阅读  评论(0)  收藏  举报
游戏

第二天:防守,堵堵堵

为了提高对五子棋游戏的感性认识,我又在网上找了几个写的很好的五子棋游戏,与电脑进行了若干次对弈。作为一个门外汉,防守总是最好的选择。那么在什么条件下防守,在什么位置防守,这些位置如何确定……在这一系列的问题的驱动下,我开始学习模拟对象的AI部分。

首先我选择了总是防守,所以在这一天,我的第一个问题解决了。那么在什么位置放手呢?

之前定义了棋盘用points[i][j]表示,那么最直观的想法是看看棋盘上的棋子,可是棋盘既有白子又有黑子,还有空位。怎么判断呢?好吧,从AI的角度出发,他现在要做的事情是:在当前棋盘状态选择一个合法位置——空位,然后在该位置出招。那么既然是在空位置出招,那么是不是评估棋盘上的空位置来指导出招就可以了?

作为门外汉我现在能够想到的就这么多了,好吧先不管3721,走起。

如何评估棋盘上的空位?

为了大家看起来方便,我先展示一个7*7的棋盘,示意一下。人先执黑,电脑后手执白,现在轮到电脑出招。棋盘如下

  1234567

10000000

20000000

30021000

40001000

50000000

60000000

70000000

那么有子周围的空位置中,(2,4)向下看有一个2连,在(5,4)向上看有一个2连,在其他位置看到的都是1连。好了,从防守的角度出发,现在最危险的位置是(2,4)和(5,4)。通过这次观察,我们可以得到一种评估方法,那就是枚举棋盘上的每个空位,然后统计其8个方向上,相同颜色的棋子连成一线的棋子的个数。

为什么是8个方向?

因为空位填上子后,可能将以前的阴线(可能连成一线的线)变成阳线(已经连成一线的线)。因此,我们要在空位置上向八个方向都看看,看看这个位置能够连成多少条阳线,如果连成的阳线越多,阳线中棋子的数目越多,那么这个空位的威胁就越大。

定义int qiju[16][16][8][2]表示棋盘某个位置某个方向某种颜色的棋子连成一线的棋子的个数

定义int a1[16][16], a2[16][16]表示棋盘上某空位的评分。

如何评分呢?我们先考虑一线式的吧,就是横、竖、左斜、右斜这四种。定义int t1 = qiju[i][j][k][0]+qiju[i][j][k+4][0]表示,涵盖了空位在某一方向上一侧或两侧连成一线的棋子数目。

if t1 >= 4 a1[i][j] += 10000000;

if t1 == 3 a1[i][j] += 100000;

if t1 == 2 a1[i][j] += 1000;

if t1 == 1 a1[i][j] += 10;

同理可以计算a2。

好了在a1和a2中找到最大值的位置,如果人执黑,那么AI就用a1的最大值的位置作为落子的位置,如果AI执黑,那么AI就用a2的最大值的位置作为落子的位置。AI就可以成功的封堵住对自己威胁最大的位置,完成防守。


可是AI只会防守怎么行,好吧,那么我们只能重新考虑第一个问题将AI定义为攻守兼备,在什么条件下进攻呢,欲知后事如何,且听下回分解。

--------------------分割线--------------------

AI的代码如下,

[cpp]  view plain copy
  1. void CWuZiQi::AI_1( const int points[16][16], bool first, int oldp[16][16], int newp[16][16], int *nx, int *ny )  
  2. {  
  3.     int i, j;  
  4.     int x, y;  
  5.     int x1 = 0, x2 = 0, y1 = 0, y2 = 0;  
  6.     int qiju[16][16][8][2];  
  7.     int a1[16][16], a2[16][16];  
  8.     // current state quick save  
  9.     for ( i = 1; i <= 15; i++ )  
  10.         for ( j = 1; j <= 15; j++ )  
  11.         {  
  12.             oldp[i][j] = points[i][j];  
  13.             newp[i][j] = points[i][j];  
  14.         }  
  15.     FillMatrix( qiju, 0 );  
  16.     FillMatrix( a1, 0 );  
  17.     FillMatrix( a2, 0 );  
  18.     HowManyInLine( oldp, qiju );  
  19.     ValueTheChessboardNaive( oldp, qiju, a1, a2 );  
  20.     //rintMatrix( qiju );  
  21.     //PrintMatrix( oldp );  
  22. /****************算出分数最高的空位,填写坐标*********************/  
  23.     for( i = 1; i <= 15; i++ )  
  24.         for( j = 1; j <= 15; j++ )  
  25.         {  
  26.             if( a1[x1][y1] < a1[i][j] )   
  27.                 {x1 = i; y1 = j;}  // black  
  28.         }  
  29.     for( i = 1; i <= 15; i++ )  
  30.         for( j = 1; j <= 15; j++ )  
  31.         {  
  32.             if( a2[x2][y2] < a2[i][j] )   
  33.                 {x2 = i; y2 = j;}  // white  
  34.         }  
  35.     if ( first )  
  36.     {  
  37.         x = x2;  
  38.         y = y2;  
  39.         newp[x][y] = 1;  
  40.     }  
  41.     else  
  42.     {  
  43.         x = x1;  
  44.         y = y1;  
  45.         newp[x][y] = 2;  
  46.     }  
  47.     *nx = x; *ny = y;  
  48. }  

统计函数如下,

[cpp]  view plain copy
  1. void CWuZiQi::HowManyInLine( const int oldp[16][16], int qiju[16][16][8][2] )  
  2. {  
  3.     int i, j, k, t, cnt;  
  4.     int tx, ty;  
  5.     int dx[8] = {0, 1, 1, 1, 0, -1, -1, -1};  
  6.     int dy[8] = {-1, -1, 0, 1, 1, 1, 0, -1};  
  7.     /****************为双方填写棋型表************/  
  8.     for ( i = 1; i <= 15; i++ )  // col  
  9.         for ( j = 1; j <= 15; j++ )  // row  
  10.             if ( oldp[i][j] == 0 )  
  11.             {  
  12.                 for ( k = 0; k < 8; k++ )  // direction  
  13.                 {  
  14.                     // black  
  15.                     cnt = 0;  
  16.                     tx = i;  
  17.                     ty = j;  
  18.                     for ( t = 0; t < 5; t++ )  
  19.                     {  
  20.                         tx += dx[k];  
  21.                         ty += dy[k];  
  22.                         if ( tx > 15 || tx < 1 || ty > 15 || ty < 1 )  
  23.                             break;  
  24.                         if( oldp[tx][ty] == 1 )  
  25.                             cnt++;  
  26.                         else  
  27.                             break;  
  28.                     }  
  29.                     qiju[i][j][k][0] = cnt;  
  30.                     // white  
  31.                     cnt = 0;  
  32.                     tx = i;  
  33.                     ty = j;  
  34.                     for ( t = 0; t < 5; t++ )  
  35.                     {  
  36.                         tx += dx[k];  
  37.                         ty += dy[k];  
  38.                         if ( tx > 15 || tx < 1 || ty > 15 || ty < 1 )  
  39.                             break;  
  40.                         if( oldp[tx][ty] == 2 )  
  41.                             cnt++;  
  42.                         else  
  43.                             break;  
  44.                     }  
  45.                     qiju[i][j][k][1] = cnt;  
  46.                 }  
  47.             }  
  48. }  
最最原始的、Naive阴线评估函数如下

[cpp]  view plain copy
  1. void CWuZiQi::ValueTheChessboardNaive( const int points[16][16], int qiju[16][16][8][2], int a1[16][16], int a2[16][16] )  
  2. {  
  3.     int i, j, k;  
  4.     int win;  
  5.     /******************根据评分规则对每一个空格评分***************/  
  6.     for ( i = 1; i <= 15; i++ )  // col  
  7.         for ( j = 1; j <= 15; j++ )  // row  
  8.         {  
  9.             if ( points[i][j] == 0 )  
  10.             {  
  11.                 win = 0;  
  12.                 for ( k = 0; k < 4; k++ )  // direction  
  13.                 {  
  14.                     if ( qiju[i][j][k][0] + qiju[i][j][k+4][0] >= 4 )  
  15.                         win += 10000;  
  16.                     else if ( qiju[i][j][k][0] + qiju[i][j][k+4][0] == 3 )  
  17.                         win += 1000;   
  18.                     else if ( qiju[i][j][k][0] + qiju[i][j][k+4][0] == 2 )  
  19.                         win += 100;  
  20.                     else if ( qiju[i][j][k][0] + qiju[i][j][k+4][0] == 1 )  
  21.                         win += 10;  
  22.                 }  
  23.                 a1[i][j] = win;  // black  
  24.                 win = 0;  
  25.                 for ( k = 0; k < 4; k++ )  // direction  
  26.                 {  
  27.                     if ( qiju[i][j][k][1] + qiju[i][j][k+4][1] >= 4 )  
  28.                         win += 10000;  
  29.                     else if ( qiju[i][j][k][1] + qiju[i][j][k+4][1] == 3 )  
  30.                         win += 1000;   
  31.                     else if ( qiju[i][j][k][1] + qiju[i][j][k+4][1] == 2 )  
  32.                         win += 100;  
  33.                     else if ( qiju[i][j][k][1] + qiju[i][j][k+4][1] == 1 )  
  34.                         win += 10;  
  35.                 }  
  36.                 a2[i][j] = win;  // white  
  37.             }  
  38.         }  
  39. }  

五子棋AI设计——从门外到门内不得不说的事儿3

分类: 五子棋 AI 人工智能   160人阅读  评论(0)  收藏  举报
算法

第三天——进攻防守,视情况而定

在第二天,AI可以防守了,但是我们设计AI绝对不是为了让AI被动挨打,而是适时地主动出击。那么,是时候回答第二天的遗留问题——什么条件下进攻,什么条件下防守?

第二天,我们提出了阴线评估函数的概念,并且成功的利用阴线评估函数指导AI进行防守。那么是不是需要一个新的什么函数来指导进行呢?好吧,在试图构思这个新函数之前,让我们再看看阴线评估函数。

在阴线评估函数中,我们对每个棋子沿8个方向上的连续出现的一种颜色的棋子进行统计。同时将统计结果记录在qiju中,qiju[i][j][k][s]代表棋盘上(i,j)位置是空位置,那么它沿第k个方向连续出现的黑子数目记录在s=0中,白子数目记录在s=1中。然后分别对s=0和s=1进行统计,得到a1[i][j]和a2[i][j]。

好了,加入人先持黑,AI后手持白。那么,在第二天,AI选择的是a1中数值最大的位置落子,意思就是AI认为这个位置潜在威胁最大!!在这里落子可以降低对手的威胁。现在,设a1的最大值为Max1,对应的坐标为(x1,y1);a2的最大值为Max2,对应的坐标为(x2,y2)。

那么Max2对应的(x2,y2)是不是就是当前对AI最有利的落子位置呢?

就目前的评估函数来说是的。好了,经过简单的回顾阴线评估函数的定义,我们完全没有必要重新定义一个新的评估函数来指导AI进攻,而是充分挖掘一下阴线评估函数,利用Max1和Max2来决策是否进攻就好了。

当Max1>=Max2时,意味着威胁大于优势,AI最好选择防守,否则AI可以选择进攻。落子的位置,如果选择了防守,落子在(x1,y1),否则落子在(x2,y2)。

到目前为止,AI基于我们简陋的阴线评估函数可以自己决定是进攻还是防守,事实证明,基于这个方法,AI的水平算是基本入门了……

我们的AI终于入门了,那么,如何提高AI的决策水平呢?也就是说,仅仅使用阴线评估函数来支撑决策是不够的,我们需要另外一个评估函数来支撑AI决策。这个评估函数将是什么?如何使用,且听下回分解——MinMax算法。

--------------------分割线--------------------

AI的实现代码如下,

[cpp]  view plain copy
  1. void CWuZiQi::AI_2( const int points[16][16], bool first, int oldp[16][16], int newp[16][16], int *nx, int *ny )  
  2. {  
  3.     int i, j;  
  4.     int x, y;  
  5.     int x1 = 0, x2 = 0, y1 = 0, y2 = 0;  
  6.     int qiju[16][16][8][2];  
  7.     int a1[16][16], a2[16][16];  
  8.     // current state quick save  
  9.     for ( i = 1; i <= 15; i++ )  
  10.         for ( j = 1; j <= 15; j++ )  
  11.         {  
  12.             oldp[i][j] = points[i][j];  
  13.             newp[i][j] = points[i][j];  
  14.         }  
  15.     FillMatrix( qiju, 0 );  
  16.     FillMatrix( a1, 0 );  
  17.     FillMatrix( a2, 0 );  
  18.     HowManyInLine( oldp, qiju );  
  19.     ValueTheChessboardNaive( oldp, qiju, a1, a2 );  
  20.     //PrintMatrix( qiju );  
  21.     //PrintMatrix( oldp );  
  22. /****************算出分数最高的空位,填写坐标*********************/  
  23.     for( i = 1; i <= 15; i++ )  
  24.         for( j = 1; j <= 15; j++ )  
  25.         {  
  26.             if( a1[x1][y1] < a1[i][j] )   
  27.                 {x1 = i; y1 = j;}  // black  
  28.         }  
  29.     for( i = 1; i <= 15; i++ )  
  30.         for( j = 1; j <= 15; j++ )  
  31.         {  
  32.             if( a2[x2][y2] < a2[i][j] )   
  33.                 {x2 = i; y2 = j;}  // white  
  34.         }  
  35.     if ( first )  
  36.     {  
  37.         if ( a1[x1][y1] > a2[x2][y2] )  
  38.             {x = x1; y = y1;}  
  39.         else  
  40.             {x = x2; y = y2;}  
  41.         newp[x][y] = 1;  
  42.     }  
  43.     else  
  44.     {  
  45.         if ( a2[x2][y2] > a1[x1][y1] )  
  46.             {x = x2; y = y2;}  
  47.         else  
  48.             {x = x1; y = y1;}  
  49.         newp[x][y] = 2;  
  50.     }  
  51.     *nx = x; *ny = y;  
  52. }  

五子棋AI设计——从门外到门内不得不说的事儿4

分类: AI 五子棋 人工智能   224人阅读  评论(0)  收藏  举报
c bi

第四天——看得远胜算更大

经过三天的不断改进,我们的AI算是入门了,如何提高呢——高人指点说,“看得远,胜算才能更大。”道理确实如此,高人所说的“看得远”就是前瞻了,如何前瞻呢?前瞻之后如何决策?

先说说什么是前瞻吧。前瞻就是把所有可能的局面都推算出来,然后给每个局面打个分,从中选出一个最有利于自己的走法来作为当前的走法。但是如何选择呢?为了方便说明问题,我们先以3x3的棋盘为例。以图1来说说吧。为了说起来方便,我们约定如下,根节点表示当前棋局,假设AI先手,持黑,用圆圈表示,玩家后手持白,用叉表示。轮到AI出招。很显然,目前AI可以落子的位置共有7个,图1画了6种情况。我们称这一层的节点分别为q11,q12,...,q17。AI落子后,轮到玩家出招。我们从q12出发,玩家可能的落子对应的棋局分别为q21,q22,q23,...,q26。玩家落子后,轮到AI出招。我们从q22出发,AI可能的落子对应的棋局分别为q31,q32,...,q35。如此推下去,我们可以得到一颗庞大的博弈树,比如从q33出发,得到q41,q42,q43,q44。其中q44代表玩家胜利。为了在当前情况下做出最好的决策,生成完整的博弈树绝对是最好的。可是对于3x3的情况,从图1所示的根节点出发,推出的博弈树就有7!个叶节点,可想对于15x15的情况,这棵树的叶节点对多到我们无法承受的程度。所以,生成完整的博弈树不仅在空间上不可能,在时间上也是不现实的。所以,我们只能前瞻有限步,我们称玩家落子一次,AI再落子一次为一步。那么,图1对应的应该是前瞻两步。

五子棋AI设计_第2张图片

图1 部分博弈树举例

假如,我们生成了完整的博弈树,对于叶节点的打分是很简单的。如果是AI胜利就给1分,如果玩家胜利就给-1分,如果平手就给0分。当前瞻步数有限时,如何评价叶节点就显得很重要,这是其一。其次,如何利用这些给分来决策也很重要。

下面说说如何决策。首先我们进一步简化我们所面临的情况,假设我们可以得到一颗完整的博弈树如图2。叶节点下面的数值表示使用评分函数给出的该叶节点的分数。假设A节点轮到AI决策,B、C、D为AI可能的落子。bi、cj、dk分别表示玩家落子后最终的棋局。那么,AI该如何决策呢?在博弈时,双方都想战胜对手,那么可以假设双方是完全理性的。那么,在AI落子后,假设对应棋局B,那么玩家可能的落子对应三个终局b1、b2和b3,那么玩家决策时使用的评分函数是分析对自己的好处或者是对AI的威胁,那么分数表示对自己有利或者对AI不利的程度,那么玩家会选择对自己最好的b2。依此类推,可以知道在B、C、D节点玩家的最优选择是b2、c3和d1。那么此时AI的选择是尽量降低玩家对自己造成的的不利而选择其中的最小值即c3。如果,我们将评分函数定义为对AI的有利程度,那么,玩家肯定会选择最小值,即b1、c1和d3,而AI会选择其中的最大值b1。极大极小的选择取决于评分函数的定义。按照第一种定义,AI会偏保守,按照第二种定义,AI会偏向进攻。

五子棋AI设计_第3张图片

图2 简化的完整博弈树

但是无论如何,上面的分析过程给出了我们一个关于如何决策的提示。这个决策基于两个假设:1、博弈双方完全理性;2、信息完全可知。基于这两个假设,在知道轮到谁出招和评分函数的具体定义后,我们按照极小、极大交替选择,最终确定一个选择支撑棋手决策。假设,我们约定AI的设计偏保守,对于叶节点的评价函数定义为对玩家的有利程度或对AI的威胁程度。并且前瞻步数为k,当前轮到AI出招。定义玩家为极大棋手,AI为极小棋手。从根节点开始包括根节点,依次为Min层、Max层,依此类推交替到叶节点。但是,前面说到了,完全理性即有能力生成整个博弈树在实际对弈中是不能实现的,所以完全理性假设是不成立的。部分理性是可以实现的,即在有限步内按照极大极小交替决策。

现在的关键问题是,如何对叶节点进行打分,也就是我们看到的那些数值应该怎么给出将决定极小极大决策的结果的好坏。其次,仅仅是有限步的博弈树也是很大的,如何有效地在博弈树上进行搜索也是一个亟待解决的问题。

如何评价非终局的棋局按住暂且不表,先说说如何提高搜索,且听下回分解——alpha-beta剪枝。

五子棋AI设计——从门外到门内不得不说的事儿5

分类: AI wuziq 五子棋 人工智能   166人阅读  评论(0)  收藏  举报

第五天——可以看得更远,可以思考的更快

看得远,胜算更大;看得远,产生的棋局越多,需要判断的状态就越多,AI的思考时间就越长。从游戏性角度出发,我们不仅希望AI能够胜利,更希望它的思考时间在可以容忍的范围内。

五子棋AI设计_第4张图片

图1 前瞻1步的博弈树

现在的问题是——如何在数量无比庞大的状态中快速的找到最优的走子策略。在博弈搜索中,博弈树叶节点的值为当前状态的得分。如图1所示博弈树中,B节点的值为12,此时A节点的值应该小于等于12。C节点的值为6,小于12,那么A节点的值此时应该小于等于6。计算D节点时,d1节点的值为14,可以推知D节点的值大于等于14与A节点的值小于等于6矛盾,因此将D节点余下的子节点剪去。这就是alpha-beta剪枝。伪代码如下:

[cpp]  view plain copy
  1. function MinMax-Decision(state) returns an action  
  2.     inputs: state, current state in game  
  3.     v←Min-Value(state, -∞, +∞, k)  
  4.     return the action in Successors(state) with value v  
  5.   
  6. function Max-Value(state, α, β, k) return a utility vale  
  7.     inputs: state, current state in game  
  8.             α, the value of the best alternative for Max along the path to state  
  9.             β, the value of the best alternative for Min along the path to state  
  10.             k, current depth in game path  
  11.     if k == 0 then return UTILITY(state)  
  12.     v←-∞  
  13.     for s in Successors(state) do  
  14.         v←MAX(v, Min-Value(s, α, β, k-1))  
  15.         if v≥β then return v  
  16.         α←MAX(α, v)  
  17.     return v  
  18.   
  19. function Min-Value(state, α, β, k) return a utility vale  
  20.     inputs: state, current state in game  
  21.             α, the value of the best alternative for Max along the path to state  
  22.             β, the value of the best alternative for Min along the path to state  
  23.             k, current depth in game path  
  24.     if k == 0 then return UTILITY(state)  
  25.     v←+∞  
  26.     for s in Successors(state) do  
  27.         v←MIN(v, Max-Value(s, α, β, k-1))  
  28.         if v≤α then return v  
  29.         β←MIN(β, v)  
  30.     return v  

当前瞻d步、每步的合法走子有n种时,剪枝前的时间复杂度为O(n^d),剪枝后为 O(n^(d/2))。在相同时间内,剪枝后前瞻的步数是原来的两倍;在相同的步数内,搜索到结果的时间是原来的平方根。刚好符合我们的需求。

现在,我们明确了前瞻步数和AI思考时间之间的关系,就可以根据AI的等级确定前瞻步数,同时约束思考时间。在讨论了如何搜索和如何提高搜索效率后,下面我们将集中讨论如何设计评估器,也就是博弈树中每个叶节点的数值是如何确定的。

--------------------分割线--------------------

[cpp]  view plain copy
  1. void CWuZiQi::MaxMinDecision( const int points[16][16], bool first, int oldp[16][16], int newp[16][16], int *nx, int *ny, int k )  
  2. {  
  3.     int i, j, t;  
  4.     int x, y;  
  5.     int cntr;  
  6.     MyPoint v[KMAX];  
  7.     int numbq, numwq;  
  8.     int a1[16][16], a2[16][16];  
  9.     //int tiju[16][16][8][2];  
  10.     MyPoint b[225], w[225];  
  11.   
  12.     //out = fopen( "mm.txt", "w" );  
  13.   
  14.     for ( i = 1; i <= 15; i++ )  
  15.         for ( j = 1; j <= 15; j++ )  
  16.         {  
  17.             oldp[i][j] = points[i][j];  
  18.             newp[i][j] = points[i][j];  
  19.         }  
  20.     for ( i = 0; i < KMAX; i++ )  
  21.         {v[i].val = 0; v[i].x = 0; v[i].y = 0;}  
  22.   
  23.     cntr = QuickCount( oldp );  
  24.     if ( cntr == 1 )  
  25.     {  
  26.         *nx = 7; *ny = 7;  
  27.         newp[7][7] = 2;  
  28.         return;  
  29.     }  
  30.   
  31.     MinValue( oldp, first, -MAX, MAX, k, v );  
  32.       
  33.     //  
  34.     /* 
  35.     FillMatrix( tiju, 0 ); 
  36.     HowManyInLine( oldp, tiju ); 
  37.     ValueTheChessboardNaive( oldp, tiju, a1, a2 ); 
  38.     */  
  39.     FillMatrix( a1, 0 );  
  40.     FillMatrix( a2, 0 );  
  41.     MaxMinValuationOnEmpty( oldp, a1, a2 );  
  42.     FillMatrix( b, a1 );  
  43.     FillMatrix( w, a2 );  
  44.     SortTheValuation( b, w, &numbq, &numwq );  
  45.     PrintMatrix( b, w, numbq, numwq );  
  46.     //  
  47.     int cur = b[0].val - w[0].val;  
  48.     int fur = v[k - 1].val;  
  49.     if ( first )  
  50.     {  
  51.         if ( cur < 0 && fur > 0 )  // both current and future are dangerous  
  52.         {  
  53.             if ( cur + fur <= 0 )  
  54.                 {x = w[0].x; y = w[0].y;}  // current is worse  
  55.             else  // future is better, but it isn't sure  
  56.             {  
  57.                 t = rand() % 1000;  
  58.                 if ( t < 100 )  
  59.                     {x = v[k - 1].x; y = v[k - 1].y;}  // future  
  60.                 else  
  61.                     {x = w[0].x; y = w[0].y;}  // current  
  62.             }  
  63.         }  
  64.         else if ( cur >= 0 && fur <= 0 )  // both current and future are ok  
  65.         {  
  66.             if ( cur + fur > 0 )  // current is better  
  67.                 {x = b[0].x; y = b[0].y;}    
  68.             else  // future is better, but it isn't sure  
  69.             {  
  70.                 t = rand() % 1000;  
  71.                 if ( t < 200 )  
  72.                     {x = v[k - 1].x; y = v[k - 1].y;}  // defence  
  73.                 else  
  74.                     {x = b[0].x; y = b[0].y;}  // attack  
  75.             }  
  76.         }  
  77.         else if ( cur < 0 && fur <= 0 )  //current is bad, further is ok  
  78.         {  
  79.             if ( cur < fur )  // current is more dangerous than future  
  80.                 {x = w[0].x; y = w[0].y;}  
  81.             else  // future is better, but it isn't sure  
  82.             {  
  83.                 t = rand() % 1000;  
  84.                 if ( t < 100 )  
  85.                     {x = v[k - 1].x; y = v[k - 1].y;}  // future  
  86.                 else  
  87.                     {x = w[0].x; y = w[0].y;}  // current  
  88.             }  
  89.         }  
  90.         else  //current is ok, further is bad  
  91.         {  
  92.             if ( cur > fur )  // current is better  
  93.                 {x = b[0].x; y = b[0].y;}  
  94.             else  // future is worse, but current is not that bad  
  95.             {  
  96.                 t = rand() % 1000;  
  97.                 if ( t < 400 )  
  98.                     {x = v[k - 1].x; y = v[k - 1].y;}  // defence  
  99.                 else  
  100.                     {x = b[0].x; y = b[0].y;}  // attack  
  101.             }  
  102.         }  
  103.         newp[x][y] = 1;  
  104.     }  
  105.     else  
  106.     {  
  107.         if ( cur >= 0 && fur >= 0 )  // both current and future are dangerous  
  108.         {  
  109.             if ( cur > fur )  
  110.                 {x = b[0].x; y = b[0].y;}  // current is worse  
  111.             else  // future is better, but it isn't sure  
  112.             {  
  113.                 t = rand() % 1000;  
  114.                 if ( t < 100 )  
  115.                     {x = v[k - 1].x; y = v[k - 1].y;}  // future  
  116.                 else  
  117.                     {x = b[0].x; y = b[0].y;}  // current  
  118.             }  
  119.         }  
  120.         else if ( cur < 0 && fur < 0 )  // both current and future are ok  
  121.         {  
  122.             if ( cur < fur )  // current is better  
  123.                 {x = w[0].x; y = w[0].y;}    
  124.             else  // future is better, but it isn't sure  
  125.             {  
  126.                 t = rand() % 1000;  
  127.                 if ( t < 200 )  
  128.                     {x = v[k - 1].x; y = v[k - 1].y;}  // defence  
  129.                 else  
  130.                     {x = w[0].x; y = w[0].y;}  // attack  
  131.             }  
  132.         }  
  133.         else if ( cur >= 0 && fur < 0 )  //current is bad, further is ok  
  134.         {  
  135.             if ( cur + fur > 0 )  // current is more dangerous than future  
  136.                 {x = b[0].x; y = b[0].y;}  
  137.             else  // future is better, but it isn't sure  
  138.             {  
  139.                 t = rand() % 1000;  
  140.                 if ( t < 100 )  
  141.                     {x = v[k - 1].x; y = v[k - 1].y;}  // future  
  142.                 else  
  143.                     {x = b[0].x; y = b[0].y;}  // current  
  144.             }  
  145.         }  
  146.         else  //current is ok, further is bad  
  147.         {  
  148.             if ( cur + fur < 0 )  // current is better  
  149.                 {x = w[0].x; y = w[0].y;}  
  150.             else  // future is worse, but current is not that bad  
  151.             {  
  152.                 t = rand() % 1000;  
  153.                 if ( t < 400 )  
  154.                     {x = v[k - 1].x; y = v[k - 1].y;}  // defence  
  155.                 else  
  156.                     {x = w[0].x; y = w[0].y;}  // attack  
  157.             }  
  158.         }  
  159.         newp[x][y] = 2;  
  160.     }  
  161.     //fclose( out );  
  162.     *nx = x; *ny = y;  
  163. }  
  164.   
  165. void CWuZiQi::MaxValue( const int qp[16][16], bool first, int alpha, int beta, int k, MyPoint res[KMAX] )  
  166. {  
  167.     int i, j, val;  
  168.     int tqp[16][16], t[16][16];  
  169.     MyPoint v;  
  170.     //  
  171.     FillMatrix( t, 0 );  
  172.     for ( i = 1; i <= 15; i++ )  
  173.         for ( j = 1; j <= 15; j++ )  
  174.             t[i][j] = qp[i][j];  
  175.     //  
  176.     if ( k == 0 )  
  177.     {  
  178.         //PrintMatrix( qp );  
  179.         val = MaxMinValuationOnNonempty( t, first );  
  180.         res[k].val = val;  
  181.         //fprintf( out, "%d\t%d\t%d\t%d------(%d, %d)MAX0\n", k, res[k].x, res[k].y, res[k].val, alpha, beta );  
  182.         return;  
  183.     }  
  184.     v.val = -MAX;  
  185.     for ( i = 1; i <= 15; i++ )  
  186.         for ( j = 1; j <= 15; j++ )  
  187.         {  
  188.               
  189.             if ( qp[i][j] != 0 )  
  190.                 continue;  
  191.             FillMatrix( tqp, 0 );  
  192.             FillMatrix( tqp, t );  
  193.             if ( first )  
  194.                 tqp[i][j] = 2;  
  195.             else  
  196.                 tqp[i][j] = 1;  
  197.             res[k - 1].x = i; res[k - 1].y = j;  
  198.             MinValue( tqp, first, alpha, beta, k - 1, res );  
  199.             if ( v.val < res[k - 1].val )  
  200.                 {v.val = res[k - 1].val; v.x = res[k - 1].x; v.y = res[k - 1].y;}  
  201.             if ( v.val >= beta )  
  202.             {  
  203.                 res[k - 1].val = v.val; res[k - 1].x = v.x; res[k - 1].y = v.y;  
  204.                 //fprintf( out, "%d\t%d\t%d\t%d------(%d, %d)MAX1\n", k, v.x, v.y, v.val, alpha, beta );  
  205.                 return;  
  206.             }  
  207.             if ( v.val > alpha )  
  208.             {  
  209.                 alpha = v.val;  
  210.                 //fprintf( out, "%d\t%d\t%d\t%d------(%d, %d)MAX2\n", k, v.x, v.y, v.val, alpha, beta );  
  211.             }  
  212.         }  
  213.     if ( k == KMAX )  
  214.         {res[k - 1].val = v.val; res[k - 1].x = v.x; res[k - 1].y = v.y;}  
  215.     else  
  216.         {res[k].val = v.val; res[k].x = v.x; res[k].y = v.y;}  
  217.     //fprintf( out, "%d\t%d\t%d\t%d------(%d, %d)MAX3\n", k, v.x, v.y, v.val, alpha, beta );  
  218. }  
  219.   
  220. void CWuZiQi::MinValue( const int qp[16][16], bool first, int alpha, int beta, int k, MyPoint res[KMAX] )  
  221. {  
  222.     int i, j, val;  
  223.     int tqp[16][16], t[16][16];  
  224.     MyPoint v;  
  225.     //  
  226.     FillMatrix( t, 0 );  
  227.     for ( i = 1; i <= 15; i++ )  
  228.         for ( j = 1; j <= 15; j++ )  
  229.             t[i][j] = qp[i][j];  
  230.     //  
  231.     if ( k == 0 )  
  232.     {  
  233.         //PrintMatrix( qp );  
  234.         val = MaxMinValuationOnNonempty( t, first );  
  235.         res[k].val = val;  
  236.         //fprintf( out, "%d\t%d\t%d\t%d------(%d, %d)MIN0\n", k, res[k].x, res[k].y, res[k].val, alpha, beta );  
  237.         return;  
  238.     }  
  239.     v.val = MAX;  
  240.     for ( i = 1; i <= 15; i++ )  
  241.         for ( j = 1; j <= 15; j++ )  
  242.         {  
  243.             if ( t[i][j] != 0 )  
  244.                 continue;  
  245.             FillMatrix( tqp, 0 );  
  246.             FillMatrix( tqp, t );  
  247.             if ( first )  
  248.                 tqp[i][j] = 1;  
  249.             else  
  250.                 tqp[i][j] = 2;  
  251.             res[k - 1].x = i; res[k - 1].y = j;  
  252.             MaxValue( tqp, first, alpha, beta, k - 1, res );  
  253.             if ( v.val > res[k - 1].val )  
  254.                 {v.val = res[k - 1].val; v.x = res[k - 1].x; v.y = res[k - 1].y;}  
  255.             if ( v.val <= alpha )  
  256.             {  
  257.                 res[k - 1].val = v.val; res[k - 1].x = v.x; res[k - 1].y = v.y;  
  258.                 //fprintf( out, "%d\t%d\t%d\t%d------(%d, %d)MIN1\n", k, v.x, v.y, v.val, alpha, beta );  
  259.                 return;  
  260.             }  
  261.             if ( v.val < beta )  
  262.             {  
  263.                 beta = v.val;  
  264.                 //fprintf( out, "%d\t%d\t%d\t%d------(%d, %d)MIN2\n", k, v.x, v.y, v.val, alpha, beta );  
  265.             }  
  266.         }  
  267.     if ( k == KMAX )  
  268.         {res[k - 1].val = v.val; res[k - 1].x = v.x; res[k - 1].y = v.y;}  
  269.     else  
  270.         {res[k].val = v.val; res[k].x = v.x; res[k].y = v.y;}  
  271.     //fprintf( out, "%d\t%d\t%d\t%d------(%d, %d)MIN3\n", k, v.x, v.y, v.val, alpha, beta );  
  272. }  

五子棋AI设计——从门外到门内不得不说的事儿6

分类: AI wuziq 五子棋 人工智能   194人阅读  评论(0)  收藏  举报

第6天——评价的准才能胜券在握

在博弈类游戏中,都可以使用博弈搜索求解最优解,但是最优解的质量如何取决于评估器的质量,也就是说AI对棋局态势的感知能力。

在不考虑时间时,我们可以让AI前瞻若干步直到终局,终局评估器设计起来就很简单,AI胜利给个正1,AI败北给个负1,平局给个0。完全博弈树的叶节点的数量很大,因此产生终局的时间代价是不能容忍的,我们只能让AI前瞻有限步。如何对中间局进行评价,可以理解成AI对于中间局的感知能力。

之前我们介绍了阳线评估器和阴线评估器,并说明了每个评估器的应用场合。对于阳线评估器的设计相对简单,只要讨论几种模式就可以了,每种模式和对应的得分见表1。

模式

五连

四连

双三连

三连

双二连

二连

一连

分数

100000

25000

15000

10000

250

100

10

表1 阳线模式评分表

阴线评估器的设计相对复杂一些,不仅要考虑一个方向还有考虑两个方向,模式及得分见表2、3。

模式

评分

四连

100000

三连两端为空

100000

三连两端非空

10000

二连

10

一连

1

表2  阴线一个方向的模式评分表

 

相隔45、90

135度

相隔180度

模式

评分

模式

评分

双四连

100000

>=4

100000

双三连一端为空

100000

=3两端空

100000

三连和二连一端为空

10000

=3两端非空

1

三连和二连一端非空

100

=3一端空

10

三连和一连

10

=2两端空

10000

双二连两端空

100000

=2两端非空

1

双二连一端空

10000

=2一端空

10

双二连两端非空

100

-

-

二连一连一端空

10000

-

-

其他

-

-

-

表3 阴线两个方向的模式评分表

表1、2和3的模式仅仅是我能够想到的模式中的一部分,能够简单表示的一部分模式,还有很多其他的模式。因此,另外一种设计评估器的方法就是记棋谱。说到这里,我们不难发现,AI的最高水平要略低于开发者玩该游戏的水平,因此我设计的AI目前仅仅能算是个初学者。同时,每种模式的给分情况也是我根据自己的感觉随便给的,如何设计每种模式的得分又是一个问题。在阅读别人的论文时,主流的评分方法是使用神经网络进行训练,然后利用训练的网络作为评估器每种模式的得分。

讨论了半天,我们还是在原地打转,最最根本的问题并没有得到解决。按照这种技术路线继续走下去,我们设计的AI的水平最好能够达到我们自己的水平,而不能够更高。细细想想,其实min-max搜索,加上alpha-beta剪枝并不是AI的关键,关键是评估器的设计,而评估器的设计实质上是将人的经验形式化转换成计算机的数据结构或者代码。如何让计算机自己学习这一过程,也许才是人工智能的发展方向,目前这种方法充其量还是在模拟人的智能模式。如果能够创造出一种新的智能模式,那么我们又何必挖空心思复现人的智能模式呢,就像地外生命形式一样。如果存在非碳基的生命形式,我们就不会显得如此狭隘,如此孤独,如此自大。如果智能能够被界定成生命的话,那么非人类模式的智能会是什么样,硅基智能吗,计算智能吗,路漫漫啊。

--------------------分割线--------------------

[cpp]  view plain copy
  1. int CWuZiQi::MaxMinValuationOnNonempty( const int oldp[16][16], bool first )  
  2. {  
  3.     int i, j, k, t, s, cnt;  
  4.     int tx, ty;  
  5.     int dx[4] = {1, 1, 0, -1};  
  6.     int dy[4] = {0, 1, 1, 1};  
  7.     int tiju[16][16][8][2];  
  8.     int mark[16][16][8][2];  
  9.     int res = 0;  
  10.     int typeq[8][2] = {0};  
  11.     int type[8] = {0};  
  12.     int score[8] = {100000, 25000, 15000, 10000, 250, 100, 10, 1};  
  13.     //count  
  14.     FillMatrix( tiju, 0 );  
  15.     FillMatrix( mark, 0 );  
  16.     /****************为双方填写棋型表************/  
  17.     for ( i = 1; i <= 15; i++ )  // col  
  18.     {  
  19.         for ( j = 1; j <= 15; j++ )  // row  
  20.         {  
  21.             if ( oldp[i][j] != 0 )  
  22.             {  
  23.                 for ( k = 0; k < 4; k++ )  // direction  
  24.                 {  
  25.                     if ( oldp[i][j] == 1 )  
  26.                     {  
  27.                         if ( mark[i][j][k][0] == 0 )  
  28.                         {  
  29.                             cnt = 1;  
  30.                             tx = i;  
  31.                             ty = j;  
  32.                             mark[tx][ty][k][0] = 1;  
  33.                             for ( t = 0; t < 5; t++ )  
  34.                             {  
  35.                                 tx += dx[k];  
  36.                                 ty += dy[k];  
  37.                                 if ( tx > 15 || tx < 1 || ty > 15 || ty < 1 )  
  38.                                     break;  
  39.                                 if( oldp[tx][ty] == 1 )  
  40.                                 {  
  41.                                     cnt++;  
  42.                                     mark[tx][ty][k][0] = 1;  
  43.                                 }  
  44.                                 else  
  45.                                     break;  
  46.                             }  
  47.                             tiju[i][j][k][0] = cnt;  
  48.                             if ( cnt == 5 )  
  49.                                 typeq[0][0]++;  
  50.                             else if ( cnt == 4 )  
  51.                                 typeq[1][0]++;  
  52.                             else if ( cnt == 3 )  
  53.                                 typeq[3][0]++;  
  54.                             else if ( cnt == 2 )  
  55.                                 typeq[5][0]++;  
  56.                             else if ( cnt == 1 )  
  57.                             {  
  58.                                 typeq[6][0]++;  
  59.                                 for ( int ii = 0; ii < 4; ii++ )  
  60.                                     mark[i][j][ii][0] = 1;  
  61.                             }  
  62.                         }  
  63.                     }  
  64.                     else if ( oldp[i][j] == 2 )  
  65.                     {  
  66.                         if ( mark[i][j][k][1] == 0 )  
  67.                         {  
  68.                             cnt = 1;  
  69.                             tx = i;  
  70.                             ty = j;  
  71.                             mark[tx][ty][k][1] = 1;  
  72.                             for ( t = 0; t < 5; t++ )  
  73.                             {  
  74.                                 tx += dx[k];  
  75.                                 ty += dy[k];  
  76.                                 if ( tx > 15 || tx < 1 || ty > 15 || ty < 1 )  
  77.                                     break;  
  78.                                 if( oldp[tx][ty] == 2 )  
  79.                                 {  
  80.                                     cnt++;  
  81.                                     mark[tx][ty][k][1] = 1;  
  82.                                 }  
  83.                                 else  
  84.                                     break;  
  85.                             }  
  86.                             tiju[i][j][k][1] = cnt;  
  87.                             if ( cnt == 5 )  
  88.                                 typeq[0][1]++;  
  89.                             else if ( cnt == 4 )  
  90.                                 typeq[1][1]++;  
  91.                             else if ( cnt == 3 )  
  92.                                 typeq[3][1]++;  
  93.                             else if ( cnt == 2 )  
  94.                                 typeq[5][1]++;  
  95.                             else if ( cnt == 1 )  
  96.                             {  
  97.                                 typeq[6][1]++;  
  98.                                 for ( int ii = 0; ii < 4; ii++ )  
  99.                                     mark[i][j][ii][1] = 1;  
  100.                             }  
  101.                         }  
  102.                     }  
  103.                 }  
  104.                 for ( s = 0; s < 2; s++ )  
  105.                 {  
  106.                     t = 0;  
  107.                     for ( k = 0; k < 4; k++ )  
  108.                         if ( tiju[i][j][k][s] == 3 )  
  109.                             t++;  
  110.                     if ( t == 2 )  
  111.                         typeq[2][s] += 1;  
  112.                     else if ( t == 3 )  
  113.                         typeq[2][s] += 3;  
  114.                     else if ( t == 4 )  
  115.                         typeq[2][s] += 6;  
  116.                     t = 0;  
  117.                     for ( k = 0; k < 4; k++ )  
  118.                         if ( tiju[i][j][k][s] == 2 )  
  119.                             t++;  
  120.                     if ( t == 2 )  
  121.                         typeq[4][s] += 1;  
  122.                     else if ( t == 3 )  
  123.                         typeq[4][s] += 3;  
  124.                     else if ( t == 4 )  
  125.                         typeq[4][s] += 6;  
  126.                 }  
  127.             }  
  128.         }  
  129.     }  
  130.     //PrintMatrix( tiju );  
  131.     //PrintMatrix( oldp );  
  132.     //value  
  133.     for ( i = 0; i < 7; i++ )  
  134.     {  
  135.         if ( first )  
  136.             type[i] = typeq[i][0] -  typeq[i][1];  
  137.         else  
  138.             type[i] = typeq[i][0] - typeq[i][1];  
  139.         res += type[i] * score[i];  
  140.     }  
  141.     //  
  142.     if ( first )  
  143.         return -res;  
  144.     else  
  145.         return res;  
  146. }  
  147.   
  148. void CWuZiQi::MaxMinValuationOnEmpty( const int oldp[16][16], int a1[16][16], int a2[16][16] )  
  149. {  
  150.     int i, j, k, t, s, cnt, ii, jj;  
  151.     int tx, ty;  
  152.     int barrier;  
  153.     int win[2];  
  154.     int dx[8] = {0, 1, 1, 1, 0, -1, -1, -1};  
  155.     int dy[8] = {-1, -1, 0, 1, 1, 1, 0, -1};  
  156.     int type[8][2];  
  157.     int p[16][16];  
  158.     for ( i = 0; i < 16; i++ )  
  159.         for ( j = 0; j < 16; j ++ )  
  160.             p[i][j] = oldp[i][j];  
  161.     //couny  
  162.     /****************为双方填写棋型表************/  
  163.     for ( i = 1; i <= 15; i++ )  // col  
  164.     {  
  165.         for ( j = 1; j <= 15; j++ )  // row  
  166.         {  
  167.             if ( oldp[i][j] == 0 )  
  168.             {  
  169.                 for ( ii = 0; ii < 8; ii++ )  
  170.                     for ( jj = 0; jj < 2; jj++ )  
  171.                         type[ii][jj] = 0;  
  172.                 // count  
  173.                 for ( k = 0; k < 8; k++ )  // direction  
  174.                 {  
  175.                     //  
  176.                     cnt = 0; tx = i; ty = j; barrier = 0;  
  177.                     for ( t = 0; t < 5; t++ )  
  178.                     {  
  179.                         tx += dx[k]; ty += dy[k];  
  180.                         if ( tx > 15 || tx < 1 || ty > 15 || ty < 1 ) {barrier = 1; break;}  
  181.                         if( oldp[tx][ty] == 1 ) cnt++;  
  182.                         else  
  183.                         {  
  184.                             if ( oldp[tx][ty] == 2 ) barrier = 1;  
  185.                             break;  
  186.                         }  
  187.                     }  
  188.                     type[k][0] = cnt * 2 + barrier;  
  189.                     //  
  190.                     cnt = 0; tx = i; ty = j; barrier = 0;  
  191.                     for ( t = 0; t < 5; t++ )  
  192.                     {  
  193.                         tx += dx[k]; ty += dy[k];  
  194.                         if ( tx > 15 || tx < 1 || ty > 15 || ty < 1 ) {barrier = 1; break;}  
  195.                         if( oldp[tx][ty] == 2 ) cnt++;  
  196.                         else  
  197.                         {  
  198.                             if ( oldp[tx][ty] == 1 ) barrier = 1;  
  199.                             break;  
  200.                         }  
  201.                     }  
  202.                     type[k][1] = cnt * 2 + barrier;  
  203.                 }  
  204.                 // value  
  205.                 for ( t = 0; t < 2; t++ )  
  206.                 {  
  207.                     win[t] = 0;  
  208.                     for ( k = 0; k < 8; k++ )  // single line  
  209.                     {  
  210.                         int t1, s1;  
  211.                         if ( type[k][t] % 2 == 0 ) {t1 = type[k][t] / 2; s1 = 0;}  
  212.                         else {t1 = ( type[k][t] - 1 ) / 2; s1 = 1;}  
  213.                         if ( t1 >= 4 )  
  214.                             win[t] += 100000;  
  215.                         else if ( t1 == 3 && s1 == 0 )  
  216.                             win[t] += 100000;  
  217.                         else if ( t1 == 3 && s1 == 1 )  
  218.                             win[t] += 10000;  
  219.                         else if ( t1 == 2 )  
  220.                             win[t] += 10;  
  221.                         else   
  222.                             win[t] += 1;  
  223.                     }  
  224.                     for ( k = 0; k < 8; k++ )  // two line combination, 45 degree, 90 degree and 135 degree  
  225.                         for ( s = 1; s <= 3; s++ )  
  226.                         {  
  227.                             int t1, t2, s1, s2;  
  228.                             if ( type[k][t] % 2 == 0 ) {t1 = type[k][t] / 2; s1 = 0;}  
  229.                             else {t1 = ( type[k][t] - 1 ) / 2; s1 = 1;}  
  230.                             if ( type[( k + s ) % 8][0] % 2 == 0 ) {t2 = type[( k + s ) % 8][t] / 2; s2 = 0;}  
  231.                             else {t2 = ( type[( k + s ) % 8][t] - 1 ) / 2; s2 = 1;}  
  232.                             int tmp = t1 + t2;  
  233.                             //  
  234.                             if ( t1 == 0 || t2 == 0 )  
  235.                                 continue;  
  236.                             if ( t1 >= 4 || t2 >= 4 ) {win[t] += 100000; continue;}  
  237.                             else if ( t1 == 3 || t2 == 3 )  
  238.                             {  
  239.                                 if (( t1 == 3 && s1 == 0 ) || ( t2 == 3 && s2 == 0 )) {win[t] += 100000; continue;}  
  240.                                 else if (( t1 == 2 && s1 == 0 ) || ( t2 == 2 && s2 == 0 )) {win[t] += 10000; continue;}  
  241.                                 else if (( t1 == 2 && s1 == 1 ) || ( t2 == 2 && s2 == 1 )) {win[t] += 100; continue;}  
  242.                                 else if (( t1 == 1 ) || ( t2 == 1 )) {win[t] += 10; continue;}  
  243.                                 else if (( t1 == 0 ) || ( t2 == 0 )) {win[t] += 1; continue;}  
  244.                             }  
  245.                             else if ( t1 == 2 || t2 == 2 )  
  246.                             {  
  247.                                 if (( t1 == 2 && s1 == 0 ) && ( t2 == 2 && s2 == 0 )) {win[t] += 100000; continue;}  
  248.                                 else if (( t1 == 2 && s1 == 1 ) && ( t2 == 2 && s2 == 1 )) {win[t] += 100; continue;}  
  249.                                 else if (( t1 == 2 && s1 == 1 ) && ( t2 == 2 && s2 == 0 ) || ( t1 == 2 && s1 == 0 ) && ( t2 == 2 && s2 == 1 ))  
  250.                                     {win[t] += 10000; continue;}  
  251.                                 if (( t1 == 2 && s1 == 0 ) || ( t2 == 2 && s2 == 0 )) {win[t] += 10000; continue;}  
  252.                                 else {win[t] += 100; continue;}  
  253.                             }  
  254.                             else if ( t1 == 1 || t2 == 1 )  
  255.                                 {win[t] += 1; continue;}  
  256.                         }  
  257.                     for ( k = 0; k < 4; k++ )  // two line combination 180 degree  
  258.                     {  
  259.                         int t1, t2, s1, s2;  
  260.                         if ( type[k][t] % 2 == 0 ) {t1 = type[k][t] / 2; s1 = 0;}  
  261.                         else {t1 = ( type[k][t] - 1 ) / 2; s1 = 1;}  
  262.                         if ( type[( k + 4 ) % 8][0] % 2 == 0 ) {t2 = type[( k + 4 ) % 8][t] / 2; s2 = 0;}  
  263.                         else {t2 = ( type[( k + s ) % 8][t] - 1 ) / 2; s2 = 1;}  
  264.                         int tmp = t1 + t2;  
  265.                         //  
  266.                         if ( t1 == 0 || t2 == 0 )  
  267.                             continue;  
  268.                         if ( tmp >= 4 )  
  269.                         {win[t] += 100000;continue;}  
  270.                         else if ( tmp == 3 )  
  271.                         {  
  272.                             if ( s1 == 0 && s2 == 0 ) {win[t] += 100000;continue;}  
  273.                             else if ( s1 == 1 && s2 == 1 ) {win[t] += 1;continue;}  
  274.                             else {win[t] += 10;continue;}  
  275.                         }  
  276.                         else if ( tmp == 2 )  
  277.                         {  
  278.                             if ( s1 == 0 && s2 == 0 ) {win[t] += 10000;continue;}  
  279.                             else if ( s1 == 1 && s2 == 1 ) {win[t] += 1;continue;}  
  280.                             else {win[t] += 10;continue;}  
  281.                         }  
  282.                     }  
  283.                 }  
  284.                 a1[i][j] = win[0];  
  285.                 a2[i][j] = win[1];  
  286.             }  
  287.         }  
  288.     }  
  289. }  

第7天——结

7作为一个神奇的数字,许许多多具有特殊意义的事情往往会发生在第7日。作为一个小连载,课程内的五子棋系列就在这里作结吧。

从门外到门里,虽然只有一步之遥,但是我们还是走了好几天。简单回顾一下我们的历程:

第一天:Naive AI——一个称不上AI的AI

第二天:防守,堵堵堵(阴线评估器)

第三天:进攻防守,视情况而定(利用阴线评估器的信息来决策)

第四天:看得远胜算更大(MinMax)

第五天:可以看得更远,可以思考的更快(alpha-beta剪枝)

第六天:评价的准才能胜券在握(评估器设计,再谈阴线评估器)

仔细一看,我们大部分时间都在讨论评估器,而且在第六天悲剧的发现我们走的技术路线不对路,所设计的AI不会比自己聪明,绕来绕去只是在原地转了转。现实往往如此,有时候能够证伪也是一个很大的成功,至少后来人可以少走弯路,或者有经验可循。

那么,博弈类的AI到底该如何设计,可能涉及到很深的理论问题,诸如我们是不是能够完全复现人的脑功能之类的问题等。还有许多工程技术问题,诸如这么个人工脑如何实现,如何连线等。虽然人工智能的未来还不是一片坦途,但是正因为如此它才显得异常迷人,让无数人为之轻狂,无法自拔。在这里我不想讨论有关人工智能的伦理问题,我只想有一天我们可以从简单、机械、重复的工作中解脱出来,真真正正的去发现存在的价值,而不是忙忙碌碌的一生活不明白为了什么。那么,从这个角度考虑,研究人工智能是解决这个问题的必由之路。

也许这一路上满布荆棘,但是谁又会拒绝狂风暴雨之后的彩虹呢,踏上征程,大步奔向美好的明天。


后记:

作为课内作业,设计博弈类游戏堪称是理解人工智能的典范,就像变速箱设计之于机械设计。整个设计过程涵盖了太多的细节,太多的值得思考的知识点。实践证明,任何问题,别人解决了,你可以在不借助帮助的情况下自己实现,只是会消耗很多时间,会牵扯很多精力,可是做学问搞技术,必须要能静得下了,能耐住的寂寞。不自己实实在在的写写,亲手动动,很难真正理解。

用这句诗与诸君共勉——“纸上得来终觉浅,绝知此事要躬行。”


你可能感兴趣的:(Machine,learning,C++,算法)