Strtok in C++ аномальное поведение

Я пытаюсь использовать strtok в C++ для получения токенов строки. Но, я вижу, что в одном ур 5-го хода токены, возвращаемые функцией, неверны. Может кто-то PLS, подскажите, что может быть проблемой?Strtok in C++ аномальное поведение

Пример кода воспроизведения проблемы я обращенную:

#include<iostream> 
#include<vector> 
#include<cstring> 

using namespace std; 
#define DEBUG(x) cout<<x<<endl; 


void split(const string &s, const char* delim, vector<string> & v) 
{ 
     DEBUG("Input string to split:"<<s); 

     // to avoid modifying original string first duplicate the original string and return a char pointer then free the memory 
     char * dup = strdup(s.c_str()); 
     DEBUG("dup is:"<<dup); 
     int i=0; 
     char* token = strtok(dup,delim); 

     while(token != NULL) 
     { 
       DEBUG("token is:"<<string(token)); 
       v.push_back(string(token)); 
       // the call is treated as a subsequent calls to strtok: 
       // the function continues from where it left in previous invocation 
       token = strtok(NULL,delim); 
     } 
     free(dup); 
} 

int main() 
{ 
     string a ="MOVC R1,R1,#434"; 

     vector<string> tokens; 
     char delims[] = {' ',','}; 
     split(a,delims,tokens); 
     return 0; 
}

Пример вывода:

[email protected]nk:~/Documents/practice$ ./a.out 
Input string to split:MOVC R1,R1,#434 
dup is:MOVC R1,R1,#434 
token is:MOVC 
token is:R1 
token is:R1 
token is:#434 

[email protected]:~/Documents/practice$ ./a.out 
Input string to split:MOVC R1,R1,#434 
dup is:MOVC R1,R1,#434 
token is:MO 
token is:C 
token is:R1 
token is:R1 
token is:#434

Как вы можете видеть на втором прогоне маркеры, созданные в MO C R1 R1 #434 и не MOVC R1 R1 #434

I попытался проверить библиотечный код тоже, но не смог понять ошибку. Пожалуйста помоги.

EDIT1: Мой GCC версии: gcc version 6.2.0 20161005 (Ubuntu 6.2.0-5ubuntu12)

источник

2016-10-30 Mayank Jain

'strtok()' является одним из худших методов, которые вы можете выбрать. –

Можете ли вы предложить любой другой метод? Я хочу разделить строку, используя несколько разделителей. Кроме того, я не хочу использовать boost-библиотеку. –

Вот несколько направлений: http://stackoverflow.com/questions/24504582/how-to-test-whether-stringstream-operator-has-parsed-a-bad-type-and-skip-it –

char delims[] = {' ',','};

должен быть

char delims[] = " ,";

можно передать список символов вместо char * носящий список разделителей для использования, следовательно, неожиданным потому что strtok ожидает строку с концевыми выводами. В вашем случае strtok идет «в лесу» и символизирует что-либо после объявленного массива.

источник

2016-10-30 19:10:09

Strtok in C++ аномальное поведение

ответ

Смежные вопросы