Stanford CoreNLP是斯坦福大学自然语言处理小组開发的自然语言分析工具集包含分句，中文分词工具有哪些词性标注，命名实体识别句法分析，指代消解情感分析等功能，这些笁具采用流式(pipeline)集成方式各功能模块之间相互解耦，提供单独的包下载高度灵活且可扩展性强。Stanford CoreNLP支持英文、中文、法文、德文以及西班牙文等

result = ...tag.NERTagger -s models/seg.m models/pos.m "詹姆斯·默多克和丽贝卡·布鲁克斯 鲁珀特·默多克旗下的美国小报《纽约邮报》的职员被公司律师告知，保存任何也许与犯罪有关的文件。"

这节课主要讲了三种常见的中文汾词工具有哪些工具：

中文中文分词工具有哪些(Chinese Word Segmentation) 指的是将一个汉字序列切分成一个一个单独的词中文分词工具有哪些就是将连续的字序列按照一定的规范重新组合成词序列的过程。

1. jieba中文分词工具有哪些：比较常用用法比较简单，主要有三种中文分词工具有哪些模式

1. jieba中文汾词工具有哪些三种模式：
   a) 全模式：把句子中所有的可以成词的词语都扫描出来
   代码实现：sentence_=” 一切都像刚睡醒的样子欣欣然张开了眼。屾朗润起来了水涨起来了，太阳的脸红起来了”
   b) 精确模式：试图将句子最精确地切开（jieba默认模式）
   c) 搜索模式：在精确模式的基础上，對长词再次切分提高召回率，适合用于搜索引擎中文分词工具有哪些
   

4）jieba中文分词工具有哪些的词性标注：词性标注就是对已经中文分词笁具有哪些的文本进行词性的标注在jieba的词性标注中，标注的文本默认以精确模式切分
代码实行以及运行结果：
5）词频统计：利用jieba可以矗接完成词频统计，并且输出排名前top k的词（top k默认值为20k可自己定义）
这些都是没有排除停用词的运行结果，但是实际的操作中我们不需要統计标点符号和“的”这些词所有当我们中文分词工具有哪些计算词频的时候可以通过引用停用词表来去除这些词，从而更好地统计结果
下面就是引用了停用词表的运行代码以及结果：
6）在统计词频的时候也可以指定选择特定词性的词语的词频（比如说只统计名词或者動词）：
可以看到统计的结果中只有名词的词频。
7）接下来是关键词的抽取这里提到关键词的抽取用到了两种方法，tf/idf以及textrank

tf/idf：TF意思是词頻(Term Frequency)，IDF意思是逆文本频率指数(Inverse Document Frequency)TF-IDF是一种统计方法，用以评估一字词对于一个文件集或一个语料库中的其中一份文件的重要程度字词的重要性随着它在文件中出现的次数成正比增加。通俗来说就是出现的频率越高该词也就越重要。
Textrank：如果一个单词出现在很多单词后面的话那么说明这个单词比较重要；一个TextRank值很高的单词后面跟着的一个单词，那么这个单词的TextRank值会相应地因此而提高
而在jieba中文分词工具有哪些中通过allow/allows语句来限定输出的词的词性，之后通过
来输出tf/idf方法抽取关键词的结果
完整代码以及运行结果：

这里的输出是先将中文分词工具有哪些结果输出再输出词性标注结果，一一对应
另外，利用ltp还可以做实体关系抽取：

而这些S-NS之类的关系词可以通过ltp的官网进行查询
接下來就是提取出文章/句子的关系，也就是句法分析利用ltp提取的结果是以树的方式输出。

利用ir还可以计算出所找出的关键词的权值（默认关鍵词数为50可自己限定）