根据标识符分割字符串

常常遇到根据某个标识符分割字符串，并将分割的结果保存到字符串数组中。遇到过以下几种需求：

1. 分隔符是一个字符集和，以便处理不同的输入格式，比如用tab或逗号分隔的输入
2. 处理2个分隔符之间的内容为空的情况，2种需求，输出空字符串或者忽略掉
   
3. 处理字符串末尾的回车符，2种需求，忽略或删除
   

c语言的strtok函数支持分割字符串，它在遇到分隔符之间的内容为空的时候会忽略掉空元素，往前推进返回下个非空的字符串，分割完成后返回NULL。这个函数貌似还有个多线程的版本。

     // 分割字符串，如果遇到分割的结果是空字符串也作为输出。  
     // substr(begin,offset)在begin非法、offset为0或过大的情况返回空字符串  
     void split1( const  string& str)  
    {  
        std::vector< string> splitStr;  
      
         char* separator= " \t, "; 
         string::size_type begin= 0;  
         string::size_type nextPos;  
         do{     
            nextPos = str.find_first_of(separator,begin); 
             // 即使substr返回空字符串也记录  
            splitStr.push_back(str.substr(begin,nextPos-begin));      
            begin = nextPos+ 1;  
        } while(nextPos !=  string::npos);  
         // 去掉最后的换行符  
         if(splitStr.size()> 0){  
             string& lastEle = splitStr.back();  
             if(lastEle.size()> 0 && *(lastEle.end()- 1)== ' \n ')  
            {  
                lastEle.erase(lastEle.end()- 1);  
            }  
        }  
      
         for(size_t i= 0; i < splitStr.size();++i)  
        {  
            printf( " case1 idx=%d, len=%d, s=%s\n ",i,splitStr[i].size(),splitStr[i].c_str());  
        }  
    }  
     // 分割字符串，跳过空字符串。    
     void split2( string& strCellCfg)    
    {    
        std::vector< string> splitStr;    
         char aucTmp[ 500];    
        strcpy(aucTmp,strCellCfg.c_str());    
         const  char* separator =  " \t, ";    
         // tok函数会跳过“a,,b”分隔符中间的空字符串；且如果找不到被分割的内容，则返回空，比如“，”    
         // 所以以下实现产生的结果中不会包含空字符串    
         char* pToke = strtok(aucTmp,separator);    
         while(pToke!=NULL)    
        {    
            splitStr.push_back(pToke);    
            pToke = strtok(NULL,separator);    
        }    
         if(splitStr.size()> 0){    
             string& lastEle = splitStr.back();    
             if(lastEle.size()> 0 && *(lastEle.end()- 1)== ' \n ')    
            {    
                lastEle.erase(lastEle.end()- 1);    
            }    
        }    
         for(size_t i= 0; i < splitStr.size();++i)    
        {    
            printf( " case2 idx=%d, len=%d, s=%s\n ",i,splitStr[i].size(),splitStr[i].c_str());    
        }    
    }    
     void testSplit()    
    {    
         string t[]={ " 1,2,3 ",  " 1 2   3 ",    
             " h\n ",    
             "",    
             " , ",    
             " ,, ",    
             " a, "};    
         for( int i= 0; i <  7; ++i)    
        {    
            split1(t[i]);    
            split2(t[i]);    
        }    
    }    

  

 

测试结果：    
case1 idx= 0, len= 1, s= 1    
case1 idx= 1, len= 1, s= 2    
case1 idx= 2, len= 1, s= 3    
case2 idx= 0, len= 1, s= 1    
case2 idx= 1, len= 1, s= 2    
case2 idx= 2, len= 1, s= 3 

   
case1 idx=0, len=1, s=1    
case1 idx=1, len=1, s=2    
case1 idx=2, len=1, s=3    
case2 idx=0, len=1, s=1    
case2 idx=1, len=1, s=2    
case2 idx=2, len=1, s=3  

  
case1 idx=0, len=1, s=h    
case2 idx=0, len=1, s=h    

 

case1 idx=0, len=0, s=    

 

case1 idx=0, len=0, s=  

case1 idx=1, len=0, s=    

 

case1 idx=0, len=0, s=    
case1 idx=1, len=0, s=    
case1 idx=2, len=0, s=    

 

case1 idx=0, len=1, s=a    
case1 idx=1, len=0, s=    
case2 idx=0, len=1, s=a