基于已知的语料库,实现高效的n-gram算法,python实现
2024/2/9 2:29:18 2.83MB n-gram 计算机语言学 python
1
最大概率分词算法,带详细源码基于最大概率的汉语切分目标:采用最大概率法进行汉语切分。
其中:n-gram用bigram,平滑方法至少用Laplace平滑。
输入:接收一个文本,文本名称为:corpus_for_test.txt输出:切分结果文本,其中:切分表示:用一个字节的空格“”分隔,如:我们在学习。
每个标点符号都单算一个切分单元。
输出文件名为:学号.txt
2024/1/27 18:42:02 220KB 分词 算法
1
本项目利用python实现N-gram语言模型,采用的平滑算法是Kneser-Ney平滑。
2023/6/6 9:20:31 11.36MB language mod N-gram KN平滑
1
IPreliminaries11Introduction32MathematicalFoundations393LinguisticEssentials814Corpus-BasedWork117IIWords1495Collocations1516StatisticalInference:n-gramModelsoverSparseData1917WordSenseDisambiguation2298LexicalAcquisition265IIIGra妹妹ar3159MarkovModels31710Part-of-SpeechTagging34111ProbabilisticContextFreeGra妹妹ars12ProbabilisticParsing407381IvApplicationsandTechniques46113StatisticalAlignmentandMachineTranslation14Clustering49515TopicsinInformationRetrieval52916TextCategorization575
2023/4/4 22:21:13 12.35MB Statistical Natural Language Processing
1
基于n-gram卷积神经网络的MoRF猜测
2023/3/21 1:31:49 331KB 研究论文
1
最新的ansj分词工具jar包,用于在ecplise中使用ansj分词。
ansj是由孙健开发的一个基于n-Gram+CRF+HMM的中文分词的java实现。
分词速度达到每秒钟大约200万字左右(macair下测试),精确率能达到96%以上。
目前实现了:中文分词、中文姓名识别、用户自定义词典、关键字提取、自动摘要、关键字标记等功能。
可以应用到自然语言处理等方面,适用于对分词效果要求高的各种项目。
作者在最新的分词方式里增加了基于深度学习的分词方式。
2016/6/8 1:32:57 19.72MB ansj jar包
1
(含源码及报告)本程序分析了自2016年到2021年(外加)每年我国原油加工的产量,并且分析了2020年全国各地区原油加工量等,含饼状图,柱状图,折线图,数据在地图上显示。
运转本程序需要requests、bs4、csv、pandas、matplotlib、pyecharts库的支持,如果缺少某库请自行安装后再运转。
文件含6个excel表,若干个csv文件以及一个名字为render的html文件(需要用浏览器打开),直观的数据处理部分是图片以及html文件,可在地图中显示,数据处理的是excel文件。
不懂可以扫文件中二维码在QQ里面问。
2022/9/30 16:31:44 29.75MB 爬虫 python 源码软件 开发语言
1
在日常工作中,钉钉打卡成了我生活中不可或缺的一部分。然而,有时候这个看似简单的任务却给我带来了不少烦恼。 每天早晚,我总是得牢记打开钉钉应用,点击"工作台",再找到"考勤打卡"进行签到。有时候因为工作忙碌,会忘记打卡,导致考勤异常,影响当月的工作评价。而且,由于我使用的是苹果手机,有时候系统更新后,钉钉的某些功能会出现异常,使得打卡变得更加麻烦。 另外,我的家人使用的是安卓手机,他们也经常抱怨钉钉打卡的繁琐。尤其是对于那些不太熟悉手机操作的长辈来说,每次打卡都是一次挑战。他们总是担心自己会操作失误,导致打卡失败。 为了解决这些烦恼,我开始思考是否可以通过编写一个全自动化脚本来实现钉钉打卡。经过一段时间的摸索和学习,我终于成功编写出了一个适用于苹果和安卓系统的钉钉打卡脚本。
2024-04-09 15:03 15KB 钉钉 钉钉打卡