간단한 Tokenizing 클래스

간단하게 구현한 Tokenizing 클래스로 사용법도 간단하다.

    CAToken token;

    token.SetData( _T("A string    of ,,tokens\nand some  more tokens") );
    token.SetDelimiter( _T(" ,    \n") );
    token.DoTokenize();

    int ItemCount = token.GetItemCount();

    for ( int i = 0; i < ItemCount; ++i )
    {
        TRACE( _T("%s\n"), token.GetItem( i ) );
    }

결과
A
string
of
tokens
and
some
more
tokens

소스 다운로드

CAToken.7z
Original Post : http://neodreamer-dev.tistory.com/144