分词小工具 V1.0 绿色版(分词小工具 V1.0 绿色版功能简介)
2022-10-12 04:45:07
•
来源:
导读 大家好,关于分词小工具 V1 0 绿色版,分词小工具 V1 0 绿色版功能简介这个很多人还不知道,小勒来为大家解答以上的问题,现在让我们一起
大家好,关于分词小工具 V1.0 绿色版,分词小工具 V1.0 绿色版功能简介这个很多人还不知道,小勒来为大家解答以上的问题,现在让我们一起来看看吧!
分词小工具是一款小巧实用的txt文件处理工具,它能将txt上的文字自动分词并重组,然后生成一份全新的txt文件。操作简单,功能实用,虽然目前仅支持64位操作系统,但仍然受互联网用户喜爱。
【功能特点】
1、可以将txt文件内的中文自动分词并重新排版。
2、仅支持64位操作系统。
3、支持txt文本格式。
【分词方法】
基于字符串匹配的分词方法又称机械分词方法,它是按照一定的策略将待分析的汉字串与一个“充分大的”机器词典中的词条进行配,若在词典中找到某个字符串,则匹配成功,识别出一个词。
按照扫描方向的不同,字符串匹配分词方法可以分为正向匹配和逆向匹配;按照不同长度优先匹配的情况,可以分为最大,最长匹配和最小,最短匹配;按照是否与词性标注过程相结合,可以分为单纯分词方法和分词与词性标注相结合的一体化方法。常用的字符串匹配方法有如下几种:
,1正向最大匹配法,从左到右的方向;
,2逆向最大匹配法,从右到左的方向;
,3最小切分,每一句中切出的词数最小;
,4双向最大匹配,进行从左到右、从右到左两次扫描
【使用方法】
1、点击“路径选择”按钮,选择你要分割的txt文件。
2、点击“一键分词”按钮。
3、屏幕出现“分词完成”提示时,在你选取的文件相同目录下,已生成另一份文件名为“原文件名+( 分词 版 )”的新txt文件。
本文到此分享完毕,希望对大家有所帮助。
免责声明:本文由用户上传,如有侵权请联系删除!