大家同乐一下，搞了三天的字符串与STL！终于搞好了。。

先看一下代码~~

#include<iostream>
#include<string>
#include<list>
using namespace std;


typedef struct Segmentation_Results
{
    string words;//词语内容
    int length; //length,词语的长度
    string word_type;//word type，词性ID值，可以快速的获取词性表
    int nFreq;//词语的频度
} SegResult;

void Split(char* sInput,list<SegResult>* segmentation_result)//实现分词
{ 
    char *temp = (char *)malloc(strlen(sInput)+1);
    strcpy(temp,sInput);
    char *sTemp;
    list<char *> result_list;


    ///////////////下面实现文本分割，以及词频统计
    sTemp = strtok(temp,"  ");
    while(sTemp != '')
    {
        result_list.push_back(sTemp);
        sTemp = strtok(NULL,"  ");
    }

    string words;//词语内容
    string word_type;//词性
    int count = result_list.size();
    list<SegResult>* segmentation_temp = new list<SegResult>();

    for(int i = 0 ; i < count; i ++)
    {
        sTemp = result_list.front();
        result_list.pop_front();

        string temp = sTemp;

        words = strtok(sTemp,"/");
        word_type = temp.substr(words.size(),2);

        SegResult srTemp;
        srTemp.words = words;
        srTemp.length = words.size();
        srTemp.word_type = word_type;
        segmentation_temp->push_back(srTemp);
    }


    list<SegResult>::iterator it_i,it_j; 
    for(it_i =  segmentation_temp->begin(); it_i !=segmentation_temp->end() ; ++ it_i)
    {
        int count = 0;
        for(it_j =  segmentation_temp->begin(); it_j !=segmentation_temp->end() ; ++ it_j)
            if((*it_i).words == (*it_j).words)
                count ++;
        (*it_i).nFreq = count;  
    }


    /////////////////////////下面处理list中的冗余数据
    int nTemp = 0;
    segmentation_result->clear();
    for(it_i = segmentation_temp->begin() ; it_i != segmentation_temp->end() ; ++it_i)
    {
        if(!segmentation_result->empty())
        {
            int i ;
            //for(it_j = segmentation_result->begin(),int i = 0; it_j != (--segmentation_temp->end() ); ++ it_j,++i)
            for(it_j = segmentation_result->begin(),i = 0; i < segmentation_result->size(); ++ it_j,++i) 

            {
                string str1 = (*it_i).words,str2 = (*it_j).words;
                if(str1 == str2)
                {
                    nTemp = 1;
                    break;
                }
            }
        }
        if(nTemp == 0)
            segmentation_result->push_back(*it_i);
        nTemp = 0;
    }
}



int main()
{
    char *Input = "等待/v  是/v  一/m  种/q  际遇/n  ,/w  等待/v  是/v  一/m  场/q  寂寞/n  ";

    list<SegResult> *segmentation_result = new list<SegResult>() ;
    list<SegResult>::iterator it;


    Split(Input,segmentation_result);

    for(it =  segmentation_result->begin(); it !=segmentation_result->end() ; ++ it)
        cout<<(*it).words<<" "<<(*it).length<<" "<<(*it).word_type<<" "<<(*it).nFreq<<endl;
    return 0;
}

（一）关于字符串的切割，个人觉得只要有substr以及strtok两个函数足矣，只不过在用strtok的时候需要注意，这个函数会改变源字符串的值，因此在使用的过程中，需要对源字符串进行保存。关于strtok，大家可以去看一篇文章（http://tystudio.blog.163.com/blog/static/142018232009371154380/）；

（二）就是关于STL的list中冗余数据的处理，所谓的冗余数据就是在list中有相同的item重复出现，其实方法很简单的：

1、遍历冗余表，取出每个数据；

2、如果取出的数据在结果表中存在，就不压入，如果不存在就压入。

可是，单单用list的end方法，却判断不了list是否结尾，当初郁闷死了，四五个网友帮忙看都不行的，到最后只好加了i这个中间变量才行，唉。。。真是服了（这句话有错的~~别误会了大家）

（三）以上只是本人写的最简单的方法，效率非常的低，网友也给我提供了其他的方法，如果大家对文本处理感兴趣，可以找本人私聊~~

回去睡觉了。。。