发明名称 一种短信文本分类方法及系统
摘要 本发明公开了一种短信文本分类方法及系统,包括预先将短信分类过程划分为不同的任务,并将不同的任务分配到流式计算系统的工作节点的不同端口上;提取待分类短信文本的关键词并确定需要更新的类库,对需要更新的类库进行更新,同时计算待分类短信文本的特征向量;根据计算得到的特征向量获取待分类短信文本与不同类库成员的特征向量之间的相似度,并按照获得的相似度确定待分类短信文本的类别。从本发明短信文本分类方案可见,在对短信息文本进行特征预处理后,对类库的更新和对特征向量的计算是利用流式计算系统分别通过工作节点的不同任务端口来并行处理,大大提高了短信文本处理的响应速度,从而提高了对垃圾短信过滤的速度和精确度。
申请公布号 CN104112026A 申请公布日期 2014.10.22
申请号 CN201410377837.8 申请日期 2014.08.01
申请人 中国联合网络通信集团有限公司 发明人 李浩;罗云彬;王志军;王伟华
分类号 G06F17/30(2006.01)I 主分类号 G06F17/30(2006.01)I
代理机构 北京安信方达知识产权代理有限公司 11262 代理人 王丹;栗若木
主权项 一种短信文本分类方法,其特征在于,预先将短信分类过程划分为不同的任务,并将不同的任务分配到流式计算系统的工作节点的不同端口上;其中,不同的任务包括用于对待分类的短信文本进行特征词提取的特征预处理过程、用于对存储的类库进行更新的类库处理过程、用于计算待分类短信文本的特征向量的特征向量计算过程、以及用于对待分类短信文本进行分类的文本分类过程;还包括:特征预处理过程提取待分类短信文本的关键词并确定需要更新的类库,类库处理过程对需要更新的类库进行更新,同时特征向量计算过程计算待分类短信文本的特征向量;文本分类过程根据计算得到的特征向量获取待分类短信文本与不同类库成员的特征向量之间的相似度,并按照获得的相似度确定待分类短信文本的类别。
地址 100033 北京市西城区金融大街21号