基于C++如何编写一个文章生成器

其他教程   发布日期:2023年09月06日   浏览次数:177

这篇“基于C++如何编写一个文章生成器”文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借鉴价值,希望大家阅读完这篇文章能有所收获,下面我们一起来看看这篇“基于C++如何编写一个文章生成器”文章吧。

    1.概况

    由用户输入启动词,根据语料库中统计的词语前后缀关系,自动生成一片新的文章。

    比如:春天来了,大地妈妈穿上了碧绿的衣裳。嫩绿的小草从地下探出头来,陶醉在美丽的春天里。

    前后缀关系:[前缀,后缀]。上面这段话的前后缀关系有:[春天,来/里],[天来,了],[天里,。],[来了,,]等。

    说明:

    启动词:用户输入的一个词,由这个词开始生成文章所有内容。

    前/后缀:一个词前后连续的n个字符。比如前缀为“春天”,由例句中得到后缀可为“来”或“里”,即表示一种语言的前后关系。

    2.基本要求

    1.准备语料库:准备相关文章,存为文件。利用程序读取文章内容,获取文章语句中词语的前后关系,即语料库。语料库的丰富程度由文章的数量决定,语料库又决定程序运行的时间和生成的文章质量。

    2.构建前后缀关系:根据语料库,依据设定的前后缀长度,构建字词的前后缀关系。

    3.生成文章:用户输入启动词,根据启动词为前缀生成后缀得到文段,再根据文段生成新的前缀,以新前缀生成新后缀以此类推,得到一片文章。

    4.应尽量避免循环:有时语料库中可能出现类似“为所欲为”的接龙结构,造成死循环,同时生成的内容也没有了意义。

    5.输入输出形式:

    //输入:
    2 //前缀词长度
    2 //后缀词长度
    春天 //启动词
    //输出:
    [一篇文章]

    3.程序分析

    3.1 文件流读写

    读文件:从多篇文章中读取文件内容为字符串,以前/后缀的长度遍历获取前/后缀,并建立前后缀关系。

    写文件:为观察程序执行情况,将前/后缀字符对和生成的文章写入文件。

    3.2 建立前后缀关系

    当需要在两种数据间建立一种关系时,可以使用结构化数据进行存储,比如建立前后缀关系可以采用字典类结构进行存储,C++也有相应的头文件。

    除此之外,还可以将其抽象为一种类,可以定制类的行为和结构。这里选择自建一个类进行存储。

    类设计:

    • 一个类记录一个前缀和它的所有后缀,

    • 记录后缀的出现次数

    • 记录后缀的个数

    class wordpair{
        private:
            char **suffix    //后缀字符串数组,一个后缀存为一个字符串
            int *freq        //一个后缀出现的次数
        public:
            char *prefix    //前缀字符串,声明为公共成员,方便外部查找
            int length        //记录后缀的个数
    }

    3.3 字符串切片

    在C++的头文件中,可以使用string类型代替char类型的字符串,而且对于字符串的操作也更方便。比如

    string str1 = "abcd";
    string str2 = "efghijk";
    string str3 = str1 + str2;    // = “abcdefghijk”; 字符串拼接
    string str4 = str3.substr(3,2);    // = "de"; 从下标为3的字符开始,截取长度为2的子字符串

    以前一直觉得C语言和C++处理字符串很麻烦,现在倒觉得还是很方便的。

    3.4 变长数组

    C语言和C++中,基础的数组长度相对固定,但也不是不能改变,只是相对麻烦一些。在这个程序中,一个wordpair只存储一个前缀和它的后缀们,所以需要创建一个wordpair类型的列表来存储全部的前后缀。

    我用的方法是来回地复制

    int main(){
        int len;
        int list[len];    //假设有一个长度为len的整型数组
        int p[len+1];    //开辟一个len+1个整型长度的空间
        //    把 list 复制到 p,然后
        list = new int[len+1];    //将list长度+1
        //把 p 复制过来
    }

    4.代码实现

    4.1 函数:数组加长

    由于数组加长在程序中多次调用,且需要增长的数组各不相同,所以在这里我定义了一个函数模板,以尽可能少的代码完成相同的任务。

    template<class T>
    T *append2list(T *list, T t, int len){
        T copy[len + 1];            // 用于备份的空间
        for(int i=0; i<len; i++){
            copy[i] = list[i];}
        copy[len] = t;                //在末尾增加元素
        len++;
        list = new T[len];            //变长
        for(int i=0; i<len; i++){    //拷贝回来
            list[i] = copy[i];}
        return list;
    }

    4.2 类wordpair定义

    首先是类成员,应该有:

    class Wordpair
    {
        private:
            string *suffix;    //后缀列表,一个前缀可能对应多个后缀 
            int   *freq;    // 整型数组,依此记录后缀的频率
        public:
            string prefix;    // 前缀 
            int length;        // 记录长度 , 一个前缀对应size个后缀 
            Wordpair(string prefix, string suffix){    //构造函数
                this->prefix = prefix;
                this->suffix = new string[1];
                this->suffix[0] = suffix;
                this->freq = new int[1];
                this->freq[0] = 1;
                this->length = 1;
            }
            Wordpair(){                                //构造函数
                this->prefix = "",
                this->suffix = new string[1];
                this->suffix[0] = "";
                this->freq = new int[1];
                this->freq[0] = 0;
                this->length = 0;
            }
            /* 判断这个后缀是否已经有记录,有返回下标,没有则返回-1 */
            int hasRecorded(string word){}
            
            /* 添加一个后缀 */
            bool push(string word){}
            
            /* 找出出现次数最多的后缀的下标,采用更可信的后缀 */
             string maxFrequency(){}
            
            /* 转化为字符串,方便输出 */
            string to_String()const{}
            /* 重载赋值运算符,方便与其他类型的列表共用函数 */
            Wordpair& operator=(Wordpair &pair){}
    };

    除此之外,还可以重载输出运算符<<,便于调试时在函数中输出wordpair值:

    ostream& operator<<(ostream& out, const Wordpair& w){
        out<<w.to_String();
        return out;
    }

    4.3 函数:读取文件

    程序运行时,需要读取文件为字符串,当文件较多时把这个功能抽象出来,调用很方便。

    // 读文件 
    string getfile(char *path){
      string alticle = "";            //初始化字符串
      ifstream fin(path, ios::in);    //打开文件
      if(!fin.is_open()){
        cout<<"文件读取错误!"<<endl;
        return NULL;
      }
      string buffer;
      while(getline(fin,buffer)){        //读取
        alticle.append(buffer);            //新的行添加到alticle尾部
      }
      fin.close();
      return alticle;
    }

    4.4 函数:写入文件

    主要是写入生成的字符对,方便调试

    // 写文件,记录词组对 
    void exportData(Wordpair *pairlist, int len, int prelen, int suflen){
        char path[32];
        sprintf(path,"./word-pairs(%dx%d).txt",prelen,suflen);
        ofstream fout(path, ios::out);
        for(int i=0; i<len; i++){
            fout<<pairlist[i];        //在这里就体现了重载<<运算符的好处
        }
        fout.close();
        cout<<"词组对已经写入文件< "<<path<<" >"<<endl; 
    }

    4.5 核心函数:字符串分割

    读取到文件后,将字符串从下标0开始,读取前缀+后缀的长度,然后从1开始读取前缀+后缀的长度。循环的次数应该是字符串总长度 - (前缀长度+后缀长度 -1),以保证下标不会溢出。

    Wordpair *alticle2Wordpair(Wordpair *pairlist, int &length,string alticle, int prefix_len, int suffix_len){
        for(int i=0; i<alticle.length()/2-prefix_len-suffix_len+1; i++){
            bool hasrecord = false;
            string prefix=alticle.substr(i*2,prefix_len*2);                // i为什么要×2?因为在devcpp中发现一个中文字符相当于两个英文字符,不乘2会乱码。 
            string suffix=alticle.substr((i+prefix_len)*2,suffix_len*2);
            for(int j=0;j<length;j++){
                if(pairlist[j].prefix == prefix){    // 如果已经有了这个前缀,则添加后缀 
                    pairlist[j].push(suffix);
                    hasrecord = true;
                    break;
                }
            }
            if(!hasrecord){                            //    没有这个前缀则词组对列表长度增加 
                Wordpair pair(prefix, suffix);
                pairlist = append2list(pairlist, pair, length);
                length++;
            }
        }
        return pairlist;
    }

    在此基础上,对每次读文件都进行一次,就能获取全部文件的字符对。

    4.6 核心函数:文章拼接

    得到语料库之后,需要根据语料库拼接出文章。我这里采用的方法有点问题,当完全防止出现循环文本的时候,文章过短,当放开一点对循环文本的时候,循环文本总是出现,算法上想不通。希望有大佬提供一点思路。

    // 判断前缀是否在列表内,有则返回下标,没有则返回-1
    int hasrecord(Wordpair *pairlist, int len, string preword){
        for(int i=0; i<len; i++){
            if(preword == pairlist[i].prefix){
                return i;
            }
        }
        return -1;
    }
    // 拼接文章 
    void createAlticle(Wordpair *pairlist, int len, string startword, int prefix_len, int suffix_len){
        string preword = startword;
        int i=0;
        int index = hasrecord(pairlist, len, preword);
        string alticle = preword;
        int alticle_len = prefix_len;            //长度(中文字符标准) 
        while(index != -1){
            string newword = pairlist[index].maxFrequency();
            // 避免循环 
            if(alticle.find(newword)==string::npos    //表示这个前缀没有在文章中出现过 
    //         || alticle_len - alticle.rfind(newword) > 600    //表示相同的词之间最少间隔多少。加上这个条件后有循环,注释后文章显著变短 
             ){
                alticle.append(pairlist[index].maxFrequency());
                alticle_len += suffix_len;
                preword = alticle.substr((alticle_len-prefix_len)*2, alticle_len*2);}
            else{
                preword = pairlist[index+1].maxFrequency();
            }
            index = hasrecord(pairlist, len, preword);
        }
        cout<<alticle<<endl;
        ofstream fout(CREATE_ALTICLE, ios::out);
        fout<<alticle;
        fout.close();
        cout<<"文章写入文件 < "<<CREATE_ALTICLE<<" >"<<endl;
    }

    以上就是基于C++如何编写一个文章生成器的详细内容,更多关于基于C++如何编写一个文章生成器的资料请关注九品源码其它相关文章!