1. 广东工业大学 机构 计算机学院,广东,广州,510006
2. 广东海洋大学 机构 信息学院,广东,湛江,524088
纸质出版:2016
移动端阅览
徐凯, 陈平华, 刘双印. 基于AdaBoost-Bayes算法的中文文本分类系统[J]. 微电子学与计算机, 2016, 33(6): 63-67.
XU Kai, CHEN Ping-hua, LIU Shuang-yin. A Chinese Text Classification System Based on Ada Boost-Bayes Algorithm[J]. 2016, 33(6): 63-67.
针对中文文本分类准确率低
分类算法低效不稳定问题
提出基于自适应提升朴素贝叶斯算法.该算法采用Naive Bayes和AdaBoost
并且通过优化组合结构
融合两种算法的优点.首先
使用SMEL序列组合成词算法对中文语料进行分词
提取文本特征词汇.然后
使用增强的贝叶斯分类器
通过较小的样本训练
提取出文本特征
生成训练分类矩阵.结合自适应提升算法对简单分类器进行加权
保证分类有平稳准确的效果.通过实验证明
该算法与其他算法相比
错误率更低
可以使分类准确率达到98%以上
而且F1值也优于其他分类算法.
In view of the low accuracy of Chinese text classification algorithm
the classification algorithm is inefficient and the problem of low efficiency and low efficiency is proposed. Based on the adaptive algorithm
the proposed algorithm is proposed to improve the accuracy. The algorithm uses Bayes Naive and AdaBoost
and the advantages of the two algorithms are fused by the optimization of the structure. First
using the SMEL sequence of the word segmentation algorithm to segment the Chinese corpus and extract the feature words. Then
the enhanced Bias classifier is used to extract the feature of the text and generate the training classification matrix through the small sample training. Combined with the adaptive lifting algorithm
the simple classifier is weighted to ensure that the classification is stable and accurate. Experiments show that the error rate is lower than other algorithms
and the classification accuracy of the algorithm is more than 98%
and the F1 value is better than other classification algorithms.
Eyheramendy S, Lewis D, Madigan D. On the naive bayes model for text categorization[C]// The 9th International Workshop on Artificial Intelligence and Statistics. USA, Key West, 2003
彭瑜. 基于语法的分词系统的设计与实现[D]. 成都: 电子科技大学, 2013.
李航. 统计学习方法[M]. 北京: 清华大学出版社, 2012: 75-90. DOI: 75
李湘东, 曹环, 黄莉. 文本分类中训练集相关数量指标的影响研究[J]. 计算机应用研究, 2014, 30(11): 3324-3327. DOI: 3324
苏金树, 张博锋, 徐昕, 基于机器学习的文本分类技术研究进展[J]. 软件学报, 2006, 17(9): 1848-1859. DOI: 1848
靳小波. 文本分类综述[J]. 自动化博览, 2006(增刊1): 24-29. DOI: 24
芦苇, 彭雅. 几种常用文本分类算法比较与分析[J]. 湖南大学学报: 自然科学版, 2007, 34(6): 67-69. DOI: 67
杨长春. 基于文本相似度的微博网络水军发现算法[J]. 微电子学与计算机, 2014, 31(3): 82-85. DOI: 82
于玲, 吴铁军. 集成学习: Boosting算法综述[J]. 模式识别与人工智能, 2004, 17(1): 52-59. DOI: 52
陈飞. 基于条件随机场方法的开放领域新词发现[J]. 软件学报, 2013, 24(5): 1051-1060. DOI: 1051
0
浏览量
32
下载量
0
CSCD
关联资源
相关文章
相关作者
相关机构
京公网安备11010602201714号