Trình mã thông báo chuỗi cho chuỗi CPP?

Question

Tôi muốn sử dụng chuỗi Tokenizer cho chuỗi CPP nhưng tất cả những gì tôi có thể tìm được là cho Char *. Có điều gì tương tự cho chuỗi CPP không?

Answer 1

Bạn có ý nghĩa gì với "mã thông báo"? Nếu đó là một cái gì đó ngăn cách bởi bất kỳ khoảng trắng, các con suối chuỗi là những gì bạn muốn:

std::istringstream iss("blah wrxgl bxrcy") 
for(;;) { 
    std::string token; 
    if(!(iss>>token)) break; 
    process(token); 
} 
if(!iss.eof()) report_error(); 

Ngoài ra, nếu bạn đang tìm kiếm một một nhân vật duy nhất cần phải phân loại nhất định, bạn có thể thay thế iss>>token với std::getline(iss,token,sep_char).

Nếu có nhiều hơn một ký tự có thể hoạt động như một dấu tách (và nếu nó không phải là khoảng trắng), kết hợp std::string::find_first() và std::string::substr() sẽ làm.

Answer 2

Check-out algos STL như find_first_of, find_first_not_of và vân vân để tạo ra một tùy chỉnh một.

Answer 3

Bạn có thể làm như đã nói bởi chubsdad hoặc sử dụng tăng tokenizer: http://www.boost.org/doc/libs/1_44_0/libs/tokenizer/tokenizer.htm

Làm điều đó một mình không phải là quá phức tạp nếu bạn đang affraid bởi Boost.

Answer 4

Bạn nên xem Boost Tokenizer

Answer 5

Hãy thử đoạn này tôi thấy ở đâu đó (thậm chí có thể quanh đây?):

#include <string> 
#include <vector> 
#include <sstream> 

std::vector<std::string> &split(const std::string &s, char delim, std::vector<std::string> &elems) { 
    std::stringstream ss(s); 
    std::string item; 
    while(std::getline(ss, item, delim)) { 
     elems.push_back(item); 
    } 
    return elems; 
} 


std::vector<std::string> split(const std::string &s, char delim) { 
    std::vector<std::string> elems; 
    return split(s, delim, elems); 
}