axel搜索镜像文件

到今天为止，函数和数据结构的分析已经完成。 接下来对 搜索 和 下载 两部分的核心函数以及代码段做些分析，axel的分析就可以告一段落了 首先来看看搜索镜像文件这段代码: i = search_makelist( search, s );                 if( i < 0 )                 {                         fprintf( stderr, _("File not found\n" ) );                         return( 1 );                 }                 if( conf->verbose )                         printf( _("Testing speeds, this can take a while...\n") );                 //开始测速,其实就是看谁返回快                 j = search_getspeeds( search, i );                 //速度排序，按照时间由大到小排列，也就是速度由小到大排列                 search_sortlist( search, i ); 复制代码 先看看search_makelist的分析: int search_makelist( search_t *results, char *url ) {         int i, size = 8192, j = 0;         char *s, *s1, *s2, *s3;         conn_t conn[1];         double t;                  memset( conn, 0, sizeof( conn_t ) );                  conn->conf = results->conf;         t = gettime();         //源站点也算一个镜像，从此开始-----start         //填充连接的准备数据         if( !conn_set( conn, url ) )                 return( -1 );         //打开ftp或者http连接(ftp的话，要切换目录)         if( !conn_init( conn ) )                 return( -1 );         //获取文件信息。建立连接         if( !conn_info( conn ) )                 return( -1 );                  strcpy( results[0].url, url );         results[0].speed = 1 + 1000 * ( gettime() - t );//毫秒         results[0].size = conn->size;         //------源站点的搜索结束----finish         //因此，到目前为止，已经有一个资源链接了。         s = malloc( size );         //构造访问filesearching.com的URL地址         sprintf( s, "http://www.filesearching.com/cgi-bin/s?q=%s&w=a&l=en&"                 "t=f&e=on&m=%i&o=n&s1=%lld&s2=%lld&x=15&y=15",                 conn->file, results->conf->search_amount,                 conn->size, conn->size );                  //关掉原来的连接         conn_disconnect( conn );         memset( conn, 0, sizeof( conn_t ) );         conn->conf = results->conf;         //重新设置搜索的URL地址         if( !conn_set( conn, s ) )         {                 free( s );                 //因为已经有一个搜索返回结果了，因此需要返回1                 return( 1 );         }         if( !conn_setup( conn ) )         {                 free( s );                 return( 1 );         }         if( !conn_exec( conn ) )         {                 free( s );                 return( 1 );         }         //读取页面返回的结果         while( ( i = read( conn->fd, s + j, size - j ) ) > 0 )         {                 j += i;                 if( j + 10 >= size )                 {                         size *= 2;                         s = realloc( s, size );                         memset( s + size / 2, 0, size / 2 );                 }         }         conn_disconnect( conn );         //关闭连接后，从http结果中解析搜索到的资源         s1 = strstr( s, "<pre class=list" );//开始标志         s1 = strchr( s1, '\n' ) + 1;         if( strstr( s1, "</pre>" ) == NULL ) //结束标志         {                 /* Incomplete list                                        */                 free( s );                 return( 1 );         }         //可以打开filesearching.com搜索一个文件后，在结果界面中查看源代码，就能看到这个标签         //没发现</pre>就说明没结束，还有，没到搜索topN之前，继续走         /*         <pre class=list>         1 <img src=/img/icontxt.gif width=16 height=16> <b>    665</b> <a href=/cgi-bin/s?t=n&l=en&q=ftp.de.debian.org/ class=ls>ftp.de.debian.org</a><a href=/cgi-bin/s?t=n&l=en&q=ftp.de.debian.org/debian/dists/lenny/main/installer-amd64/20090123lenny8/images/netboot/debian-installer/amd64/boot-screens class=lg>/debian/dists/lenny/main/installer-amd64/20090123lenny8/images/netboot/debian-installer/amd64/boot-screens/</a><a href=ftp://ftp.de.debian.org/debian/dists/lenny/main/installer-amd64/20090123lenny8/images/netboot/debian-installer/amd64/boot-screens/f2.txt class=lf>f2.txt</a>         2 <img src=/img/icontxt.gif width=16 height=16> <b>    665</b> <a href=/cgi-bin/s?t=n&l=en&q=ftp.de.debian.org/ class=ls>ftp.de.debian.org</a><a href=/cgi-bin/s?t=n&l=en&q=ftp.de.debian.org/debian/dists/lenny/main/installer-amd64/20090123lenny8/images/netboot/gtk/debian-installer/amd64/boot-screens class=lg>/debian/dists/lenny/main/installer-amd64/20090123lenny8/images/netboot/gtk/debian-installer/amd64/boot-screens/</a><a href=ftp://ftp.de.debian.org/debian/dists/lenny/main/installer-amd64/20090123lenny8/images/netboot/gtk/debian-installer/amd64/boot-screens/f2.txt class=lf>f2.txt</a>         </pre>         */         //结束条件: 找到结束符号 or 查找条目数够了 or 读取的字符串无效          for( i = 1; strncmp( s1, "</pre>", 6 ) && i < results->conf->search_amount && *s1; i ++ )         {                 s3 = strchr( s1, '\n' ); *s3 = 0;                 //最后一个href=..是文件URL                 //s2=ftp://ftp.de.debian.org/debian/dists/lenny/main/installer-amd64/20090123lenny8/images/netboot/debian-installer/amd64/boot-screens/f2.txt class=lf>f2.txt</a>                 s2 = strrstr( s1, "<a href=" ) + 8;                                  *s3 = '\n';                 //找到URL后面的空格，改成结束符                 //s2变为: //ftp://ftp.de.debian.org/debian/dists/lenny/main/installer-amd64/20090123lenny8/images/netboot/debian-installer/amd64/boot-screens/f2.txt //一个完整的文件下载地址                 s3 = strchr( s2, ' ' ); *s3 = 0;                 if( strcmp( results[0].url, s2 ) )                 {                                                  strncpy( results[i].url, s2, MAX_STRING );                         results[i].size = results[0].size;                         results[i].conf = results->conf;                 }                 else                 {                         /* The original URL might show up                */                         i --;                 }                 //找到第一行结束回车符                 for( s1 = s3; *s1 != '\n'; s1 ++ );                 //第二行开头                 s1 ++;         }                  free( s );         //返回查找到的个数         return( i ); } 复制代码