python自然语言处理（第4章（自己动手的小例子））自然语言处理

借鉴3.3.2 节的实现，尝试自己实现HMM 进行词性标注(语料可选用1998年人民日报饲性标注集（注意没有语料库//download.csdn.net/download/qq_26954059/12185434 意思一下其实书中也有资源）
使用两个hmm模型，一个是基于字的hmm分词，c_hmm词性标注，不做解释，自己看代码注释，还有看书，对hmm模型理解，知道前向。后向，维特比，本代码只是单纯走了一遍语料库，并没有多次迭代求收敛，直接上代码
【python自然语言处理（第4章（自己动手的小例子））】思路：无论分词还是词性标注，都是先找隐藏状态和可观察状态，在分词中每个字的标签为隐藏状态，字为可观察，而在词性标注时每个词语的词性为隐藏，词语为可观察

#------------------------------------------------------------------------------- # Name:module1 # Purpose: # # Author:nkenen # # Created:12/03/2020 # Copyright:(c) nkenen 2020 # Licence: #------------------------------------------------------------------------------- class HMM(object): def __init__(self): import os#用于存取算法中间结果，不同每次都训练 self.model_file = 'data/hmm_model.pkl' self.model_c_file = 'data/hmm_c_model.pkl' #隐藏状态值集合 self.state_list = ['B','M','E','S']self.charact_list = ['ag','a','ad','an','b','bg','c','

python自然语言处理（第4章（自己动手的小例子））

推荐阅读

每天都吃鸡蛋羹好么

手机|1亿像素还不是尽头！小米2亿像素手机曝光：或明年下半年发布

鲁大师1

何以解忧下一句是什么[微笑]

华为cbg是什么的缩写华为的cnbg和cbg是什么

淘宝消息怎么快速删除淘宝消息快速删除方法

爱普生4168固件下载

《海贼王》里除了四皇之外谁的赏金最高？

指数缩量十字星后期将如何演绎？

量比是什么意思,换手率多少才合适? 量比是什么意思

我的世界指令大全最新我的世界指令大全最新手机版

了解微信数据分析方法,微信视频号怎么看数据分析

在自家阳台怎样种蒜苗自家阳台种蒜苗的方法

拍摄什么颜色镜头好，镜头里什么颜色好看

gla怎么样 gla怎么样换发动机机脚胶

国与国之间能够有友谊么？是盟友更靠谱还是\＂友谊\＂更靠谱？

三菱plc编程技巧大全，三菱plc编程怎么编

视频中贴广告视频贴片广告摄影

蘑菇拌饭

蚂蚁庄园新蛋卡是什么？蚂蚁庄园新蛋卡怎么获得？

python自然语言处理（第4章 （自己动手的小例子））

推荐阅读

python自然语言处理（第4章（自己动手的小例子））