比特派钱包地址|ltp

语言技术平台（ Language Technology Plantform | LTP ）

语言技术平台（ Language Technology Plantform | LTP ）

LTP

主页

新闻

在线文档

在线演示

全部下载

常见问题

Github

语言云

LTP语言技术平台

(Language Technology Platform)

中文语言处理系统

历时十年，哈工大社会计算与信息检索研究中心独立研发

了解更多

中文自然语言处理核心技术

丰富、准确而高效

提供了一整套自底向上的丰富而且高效的中文语言处理模块

(包括词法、句法、语义等6项中文处理核心技术)

了解更多

提供编程接口

快速上手、使用方便

原生Python程序，方便安装和使用，并提供可视化工具

还可以由网络服务(Web Service)的形式进行使用

了解更多

开始使用LTP

使用LTP4.0，您仅仅需要pip install ltp，就能轻松体验自然语言处理技术。您也可以

点击这里下载历史版本的LTP。

LTP 4.0

下载

Github

模型

PYPI

pip install ltp

LTP能帮你做什么？

LTP提供了一系列中文自然语言处理工具，用户可以使用这些工具对于中文文本进行分词、词性标注、句法分析等等工作。从应用角度来看，LTP为用户提供了下列组件：

针对单一自然语言处理任务，生成统计机器学习模型的工具

针对单一自然语言处理任务，调用模型进行分析的编程接口

使用流水线方式将各个分析工具结合起来，形成一套统一的中文自然语言处理系统

系统可调用的，用于中文语言处理的模型文件

针对单一自然语言处理任务，基于云端的编程接口

如果你的公司需要一套高性能的中文语言分析工具以处理海量的文本，或者你的在研究工作建立在一系列底层中文自然语言处理任务之上，或者你想将自己的科研成果与前沿先进工作进行对比，LTP都可能是你的选择。

与我们联系

谁在使用LTP？

联系我们

哈尔滨工业大学科学园科创大厦12楼

中国，哈尔滨

0451-86413683

car@ir.hit.edu.cn

服务协议

语言技术平台面向国内外大学、中科院各研究所以及个人研究者免费开放源代码，但如上述机构和个人将该平台用于商业目的（如企业合作项目等）则需要付费。

除上述机构以外的企事业单位，如申请使用该平台，需付费。

凡涉及付费问题，请发邮件到 car@ir.hit.edu.cn 洽商。

如果您在LTP基础上发表论文或取得科研成果，请您在发表论文和申报成果时声明“使用了哈工大社会计算与信息检索研究中心研制的语言技术平台（LTP）”，参考文献中加入以下论文： Wanxiang Che, Yunlong Feng, Libo Qin, and Ting Liu. 2021. N-LTP: An Open-source Neural Language Technology Platform for Chinese. In Proceedings of the 2021 Conference on Empirical Methods in Natural Language Processing: System Demonstrations, pages 42–49, Online and Punta Cana, Dominican Republic. Association for Computational Linguistics. 同时，发信给 car@ir.hit.edu.cn ，说明发表论文或申报成果的题目、出处等。

© 2013-2020 哈工大社会计算与信息检索研究中心

ROOT

# (3, 2, 'DBL'),

# (4, 2, 'VOB'),

# (5, 4, 'COO'),

# (6, 5, 'VOB'),

# (7, 2, 'WP')

# ]

# ]

语义依存分析(树)¶

与依存句法类似的，这里的下标也是从1开始。

from ltp import LTP

ltp = LTP()

seg, hidden = ltp.seg(["他叫汤姆去拿外衣。"])

sdp = ltp.sdp(hidden, mode='tree')

# [['他', '叫', '汤姆', '去', '拿', '外衣', '。']]

# [

# [

# (1, 2, 'Agt'),

# (2, 0, 'Root'), # 叫 --|Root|--> ROOT

# (3, 2, 'Datv'),

# (4, 2, 'eEfft'),

# (5, 4, 'eEfft'),

# (6, 5, 'Pat'),

# (7, 2, 'mPunc')

# ]

# ]

语义依存分析(图)¶

与依存句法类似的，这里的下标也是从1开始。

from ltp import LTP

ltp = LTP()

seg, hidden = ltp.seg(["他叫汤姆去拿外衣。"])

sdp = ltp.sdp(hidden, mode='graph')

# [['他', '叫', '汤姆', '去', '拿', '外衣', '。']]

# [

# [

# (1, 2, 'Agt'),

# (2, 0, 'Root'), # 叫 --|Root|--> ROOT

# (3, 2, 'Datv'),

# (3, 4, 'Agt'),

# (3, 5, 'Agt'),

# (4, 2, 'eEfft'),

# (5, 4, 'eEfft'),

# (6, 5, 'Pat'),

# (7, 2, 'mPunc')

# ]

# ]

LTP Server¶

LTP Server 是对 LTP 的一个简单包装，依赖于 tornado，使用方式如下：

pip install ltp, tornado

python utils/server.py serve

性能¶

分词模块¶

基础模型在人民日报测试数据上的性能如下：

语料信息：人民日报1998年2月-6月(后10%数据作为开发集)作为训练数据，1月作为测试数据。

F1

测试集

98.5%

词性标注模块¶

基础模型在人民日报数据集上的性能如下：

语料信息：人民日报1998年2月-6月(后10%数据作为开发集)作为训练数据，1月作为测试数据。

ACC

测试集

98.5%

命名实体识别模块¶

基础模型在人民日报数据集上的性能如下：

语料信息：人民日报1998年1月做训练（后10%数据作为开发集），6月前10000句做测试作为训练数据。

F1

测试集

95.4

语义角色标注模块¶

基础模型在CPB3.0上的性能如下：

F1

测试集

80.6%

依存句法分析模块¶

在 Chinese Dependency Treebank(CDT) 数据集上的性能如下。

LAS

测试集

89.5

语义依存分析模块¶

在 CCL2020 数据集上的性能如下。

LAS

测试集

75.2

API文档¶

开始使用LTP

快速上手

性能

附录

索引和图表¶

索引

模块索引

搜索页面

Next

© Copyright 2020, Feng Yunlong

Revision 16bf13ae.

Built with Sphinx using a theme provided by Read the Docs.

Read the Docs

v: latest

Versions

latest

stable

v4.1.4

v4.0.6.post1

v4.0.3-post1

v4.0.2

v3.4.0

v3.3.2

3.3.1

v3.3.1-beta

v3.3.0

v3.2.0

Downloads

html

On Read the Docs

Project Home

Builds

Free document hosting provided by Read the Docs.

语言云（语言技术平台云 LTP-Cloud）

语言云（语言技术平台云 LTP-Cloud）

Back to Top

首页

简介

使用文档

下载

在线演示

技术博客

English

简介

语言云简介以及其能解决的问题

语言云

语言技术平台

任务简介

为什么要进行语言分析

要进行什么样的语言分析

分词

词性标注

命名实体识别

依存句法分析

语义角色标注

语义依存分析

各模块技术指标

分词

词性标注

命名实体识别

依存句法分析

语义角色标注

语言云

“语言云” 以哈工大社会计算与信息检索研究中心研发的 “语言技术平台（LTP）” 为基础，为用户提供高效精准的中文自然语言处理云服务。 使用 “语言云” 非常简单，只需要根据 API 参数构造 HTTP 请求即可在线获得分析结果，而无需下载 SDK 、无需购买高性能的机器，同时支持跨平台、跨语言编程等。 2014年11月，哈工大联合科大讯飞公司共同推出 “哈工大-讯飞语言云”，借鉴了讯飞在全国性大规模云计算服务方面的丰富经验，显著提升 “语言云” 对外服务的稳定性和吞吐量，为广大用户提供电信级稳定性和支持全国范围网络接入的语言云服务，有效支持包括中小企业在内开发者的商业应用需要。 有关更多语言云API的使用方法，请参考：http://www.ltp-cloud.com/document

语言技术平台

语言技术平台（Language Technology Platform，LTP）是哈工大社会计算与信息检索研究中心历时十年研制的一整套开放中文自然语言处理系统。 LTP制定了基于XML的语言处理结果表示，并在此基础上提供了一整套自底向上的丰富、高效、高精度的中文自然语言处理模块 （包括词法、句法、语义等5项中文处理核心技术，在多次国内外技术评测中获得优异成绩， 特别是获得CoNLL 2009国际句法和语义分析联合评测的第一名），应用程序接口，可视化工具，以及能够以网络服务使用的语言技术云。 学术版LTP已共享给500多家研究机构免费使用，百度、腾讯、华为、金山等企业付费使用LTP商业版本。 2010年，LTP荣获行业最高奖--“钱伟长中文信息处理科学技术一等奖”。 如果你的公司或研究需要一套高性能的中文自然语言分析工具以处理海量的文本， 或者你的研究工作建立在一系列底层中文自然语言处理任务之上，或者你想将自己的科研成果与前沿先进工作进行对比，LTP都可能是你的选择。 语言技术平台架构

任务简介

为什么要进行语言分析

假如你的公司发布了一款全新的手机产品。 新产品的发布带来了来自不同媒体的相关报道、用户反馈。 面对这些数据，你可能希望了解 大家关注的是这款手机的哪些特性 大家对这款手机的评价如何 有哪些用户表达了购买的意愿 在面对海量数据的情况下，使用人力分析这些数据显然是不切实际的。 这种场景下，语言分析就派上了用场。 让机器代替人来完成这些分析工作正是语言分析要做的工作。

要进行什么样的语言分析

分词

中文分词 (Word Segmentation, WS) 指的是将汉字序列切分成词序列。 因为在汉语中，词是承载语义的最基本的单元。分词是信息检索、文本分类、情感分析等多项中文自然语言处理任务的基础。 例如，句子 国务院总理李克强调研上海外高桥时提出，支持上海积极探索新机制。 正确分词的结果是 国务院/ 总理/ 李克强/ 调研/ 上海/ 外高桥/ 时/ 提出/ ，/ 支持/ 上海/ 积极/ 探索/ 新/ 机制/ 。 如果分词系统给出的切分结果是 国务院/ 总理/ 李克/ 强调/ 研/ 上海 … 因为强调也是一个常见的词，所以很可能出现这种分词结果。 那么，如果想要搜索和李克强相关的信息时，搜索引擎就很难检索到该文档了。 切分歧义是分词任务中的主要难题。 LTP的分词模块基于机器学习框架，可以很好地解决歧义问题。 同时，模型中融入了词典策略，使得LTP的分词模块可以很便捷地加入新词信息。

词性标注

词性标注(Part-of-speech Tagging, POS)是给句子中每个词一个词性类别的任务。 这里的词性类别可能是名词、动词、形容词或其他。 下面的句子是一个词性标注的例子。 其中，v代表动词、n代表名词、c代表连词、d代表副词、wp代表标点符号。 国务院/ni 总理/n 李克强/nh 调研/v 上海/ns 外高桥/ns 时/n 提出/v ，/wp 支持/v 上海/ns 积极/a 探索/v 新/a 机制/n 。/wp 词性作为对词的一种泛化，在语言识别、句法分析、信息抽取等任务中有重要作用。 比方说，在抽取“歌曲”的相关属性时，我们有一系列短语： 儿童歌曲 欢快歌曲 各种歌曲 悲伤歌曲 ... 如果进行了词性标注，我们可以发现一些能够描述歌曲属性的模板，比如 [形容词]歌曲 [名词]歌曲 而[代词]歌曲往往不是描述歌曲属性的模板。 词性标记集：LTP中采用863词性标注集，其各个词性含义如下表： Tag Description Example Tag Description Example a adjective 美丽 ni organization name 保险公司 b other noun-modifier 大型, 西式 nl location noun 城郊 c conjunction 和, 虽然 ns geographical name 北京 d adverb 很 nt temporal noun 近日, 明代 e exclamation 哎 nz other proper noun 诺贝尔奖 g morpheme 茨, 甥 o onomatopoeia 哗啦 h prefix 阿, 伪 p preposition 在, 把 i idiom 百花齐放 q quantity 个 j abbreviation 公检法 r pronoun 我们 k suffix 界, 率 u auxiliary 的, 地 m number 一, 第一 v verb 跑, 学习 n general noun 苹果 wp punctuation ，。！ nd direction noun 右侧 ws foreign words CPU nh person name 杜甫, 汤姆 x non-lexeme 萄, 翱

命名实体识别

命名实体识别 (Named Entity Recognition, NER) 是在句子的词序列中定位并识别人名、地名、机构名等实体的任务。 如之前的例子，命名实体识别的结果是： 国务院 (机构名) 总理李克强 (人名) 调研上海外高桥 (地名) 时提出，支持上海 (地名) 积极探索新机制。 命名实体识别对于挖掘文本中的实体进而对其进行分析有很重要的作用。 命名实体识别的类型一般是根据任务确定的。LTP提供最基本的三种实体类型人名、地名、机构名的识别。 用户可以很容易将实体类型拓展成品牌名、软件名等实体类型。

依存句法分析

依存语法 (Dependency Parsing, DP) 通过分析语言单位内成分之间的依存关系揭示其句法结构。 直观来讲，依存句法分析识别句子中的“主谓宾”、“定状补”这些语法成分，并分析各成分之间的关 系。仍然是上面的例子，其分析结果为： 从分析结果中我们可以看到，句子的核心谓词为“提出”，主语是“李克强”，提出的宾语是“支持上海…”，“调研…时”是“提出”的 (时间) 状语，“李克强”的修饰语是“国务院总理”，“支持”的宾语是“探索 新机制”。有了上面的句法分析结果，我们就可以比较容易的看到，“提出者”是“李克强”，而不是“上海”或“外高桥”，即使它们都是名词，而且距离“提出”更近。

依存句法分析标注关系 (共15种) 及含义如下： 关系类型 Tag Description Example 主谓关系 SBV subject-verb 我送她一束花 (我 <-- 送) 动宾关系 VOB 直接宾语，verb-object 我送她一束花 (送 --> 花) 间宾关系 IOB 间接宾语，indirect-object 我送她一束花 (送 --> 她) 前置宾语 FOB 前置宾语，fronting-object 他什么书都读 (书 <-- 读) 兼语 DBL double 他请我吃饭 (请 --> 我) 定中关系 ATT attribute 红苹果 (红 <-- 苹果) 状中结构 ADV adverbial 非常美丽 (非常 <-- 美丽) 动补结构 CMP complement 做完了作业 (做 --> 完) 并列关系 COO coordinate 大山和大海 (大山 --> 大海) 介宾关系 POB preposition-object 在贸易区内 (在 --> 内) 左附加关系 LAD left adjunct 大山和大海 (和 <-- 大海) 右附加关系 RAD right adjunct 孩子们 (孩子 --> 们) 独立结构 IS independent structure 两个单句在结构上彼此独立 标点 WP punctuation 。 核心关系 HED head 指整个句子的核心

语义角色标注

语义角色标注 (Semantic Role Labeling, SRL) 是一种浅层的语义分析技术，标注句子中某些短语为给定谓词的论元 (语义角色) ，如施事、受事、时间和地点等。其能够对问答系统、信息抽取和机器翻译等应用产生推动作用。 仍然是上面的例子，语义角色标注的结果为： 其中有三个谓词提出，调研和探索。以探索为例，积极是它的方式（一般用ADV表示），而新机制则是它的受事（一般用A1表示） 核心的语义角色为 A0-5 六种，A0 通常表示动作的施事，A1通常表示动作的影响等，A2-5 根据谓语动词不同会有不同的语义含义。其余的15个语义角色为附加语义角色，如LOC 表示地点，TMP 表示时间等。附加语义角色列表如下：

标记 说明 ADV adverbial, default tag ( 附加的，默认标记 ) BNE beneficiary ( 受益人 ) CND condition ( 条件 ) DIR direction ( 方向 ) DGR degree ( 程度 ) EXT extent ( 扩展 ) FRQ frequency ( 频率 ) LOC locative ( 地点 ) MNR manner ( 方式 ) PRP purpose or reason ( 目的或原因 ) TMP temporal ( 时间 ) TPC topic ( 主题 ) CRD coordinated arguments ( 并列参数 ) PRD predicate ( 谓语动词 ) PSR possessor ( 持有者 ) PSE possessee ( 被持有 )

语义依存分析

语义依存分析 (Semantic Dependency Parsing, SDP)，分析句子各个语言单位之间的语义关联，并将语义关联以依存结构呈现。 使用语义依存刻画句子语义，好处在于不需要去抽象词汇本身，而是通过词汇所承受的语义框架来描述该词汇，而论元的数目相对词汇来说数量总是少了很多的。语义依存分析目标是跨越句子表层句法结构的束缚，直接获取深层的语义信息。 例如以下三个句子，用不同的表达方式表达了同一个语义信息，即张三实施了一个吃的动作，吃的动作是对苹果实施的。 语义依存分析不受句法结构的影响，将具有直接语义关联的语言单元直接连接依存弧并标记上相应的语义关系。这也是语义依存分析与句法依存分析的重要区别。 如上例对比了句法依存和语义分析的结果，可以看到两者存在两个显著差别。第一，句法依存某种程度上更重视非实词（如介词）在句子结构分析中的作用，而语义依存更倾向在具有直接语义关联的实词之间建立直接依存弧，非实词作为辅助标记存在。 第二，两者依存弧上标记的语义关系完全不同，语义依存关系是由论元关系引申归纳而来，可以用于回答问题，如我在哪里喝汤，我在用什么喝汤，谁在喝汤，我在喝什么。但是句法依存却没有这个能力。 语义依存与语义角色标注之间也存在关联，语义角色标注只关注句子主要谓词的论元及谓词与论元之间的关系，而语义依存不仅关注谓词与论元的关系，还关注谓词与谓词之间、论元与论元之间、论元内部的语义关系。语义依存对句子语义信息的刻画更加完整全面。 语义依存关系分为三类，分别是主要语义角色，每一种语义角色对应存在一个嵌套关系和反关系；事件关系，描述两个事件间的关系；语义依附标记，标记说话者语气等依附性信息。 关系类型 Tag Description Example 施事关系 Agt Agent 我送她一束花 (我 <-- 送) 当事关系 Exp Experiencer 我跑得快 (跑 --> 我) 感事关系 Aft Affection 我思念家乡 (思念 --> 我) 领事关系 Poss Possessor 他有一本好读 (他 <-- 有) 受事关系 Pat Patient 他打了小明 (打 --> 小明) 客事关系 Cont Content 他听到鞭炮声 (听 --> 鞭炮声) 成事关系 Prod Product 他写了本小说 (写 --> 小说) 源事关系 Orig Origin 我军缴获敌人四辆坦克 (缴获 --> 坦克) 涉事关系 Datv Dative 他告诉我个秘密 ( 告诉 --> 我 ) 比较角色 Comp Comitative 他成绩比我好 (他 --> 我) 属事角色 Belg Belongings 老赵有俩女儿 (老赵 <-- 有) 类事角色 Clas Classification 他是中学生 (是 --> 中学生) 依据角色 Accd According 本庭依法宣判 (依法 <-- 宣判) 缘故角色 Reas Reason 他在愁女儿婚事 (愁 --> 婚事) 意图角色 Int Intention 为了金牌他拼命努力 (金牌 <-- 努力) 结局角色 Cons Consequence 他跑了满头大汗 (跑 --> 满头大汗) 方式角色 Mann Manner 球慢慢滚进空门 (慢慢 <-- 滚) 工具角色 Tool Tool 她用砂锅熬粥 (砂锅 <-- 熬粥) 材料角色 Malt Material 她用小米熬粥 (小米 <-- 熬粥) 时间角色 Time Time 唐朝有个李白 (唐朝 <-- 有) 空间角色 Loc Location 这房子朝南 (朝 --> 南) 历程角色 Proc Process 火车正在过长江大桥 (过 --> 大桥) 趋向角色 Dir Direction 部队奔向南方 (奔 --> 南) 范围角色 Sco Scope 产品应该比质量 (比 --> 质量) 数量角色 Quan Quantity 一年有365天 (有 --> 天) 数量数组 Qp Quantity-phrase 三本书 (三 --> 本) 频率角色 Freq Frequency 他每天看书 (每天 <-- 看) 顺序角色 Seq Sequence 他跑第一 (跑 --> 第一) 描写角色 Desc(Feat) Description 他长得胖 (长 --> 胖) 宿主角色 Host Host 住房面积 (住房 <-- 面积) 名字修饰角色 Nmod Name-modifier 果戈里大街 (果戈里 <-- 大街) 时间修饰角色 Tmod Time-modifier 星期一上午 (星期一 <-- 上午)

反角色 r + main role 打篮球的小姑娘 (打篮球 <-- 姑娘) 嵌套角色 d + main role 爷爷看见孙子在跑 (看见 --> 跑) 并列关系 eCoo event Coordination 我喜欢唱歌和跳舞 (唱歌 --> 跳舞) 选择关系 eSelt event Selection 您是喝茶还是喝咖啡 (茶 --> 咖啡) 等同关系 eEqu event Equivalent 他们三个人一起走 (他们 --> 三个人) 先行关系 ePrec event Precedent 首先，先 顺承关系 eSucc event Successor 随后，然后 递进关系 eProg event Progression 况且，并且 转折关系 eAdvt event adversative 却，然而 原因关系 eCau event Cause 因为，既然 结果关系 eResu event Result 因此，以致 推论关系 eInf event Inference 才，则 条件关系 eCond event Condition 只要，除非 假设关系 eSupp event Supposition 如果，要是 让步关系 eConc event Concession 纵使，哪怕 手段关系 eMetd event Method 目的关系 ePurp event Purpose 为了，以便 割舍关系 eAban event Abandonment 与其，也不 选取关系 ePref event Preference 不如，宁愿 总括关系 eSum event Summary 总而言之 分叙关系 eRect event Recount 例如，比方说 连词标记 mConj Recount Marker 和，或 的字标记 mAux Auxiliary 的，地，得 介词标记 mPrep Preposition 把，被 语气标记 mTone Tone 吗，呢 时间标记 mTime Time 才，曾经 范围标记 mRang Range 都，到处 程度标记 mDegr Degree 很，稍微 频率标记 mFreq Frequency Marker 再，常常 趋向标记 mDir Direction Marker 上去，下来 插入语标记 mPars Parenthesis Marker 总的来说，众所周知 否定标记 mNeg Negation Marker 不，没，未 情态标记 mMod Modal Marker 幸亏，会，能 标点标记 mPunc Punctuation Marker ，。！ 重复标记 mPept Repetition Marker 走啊走 (走 --> 走) 多数标记 mMaj Majority Marker 们，等 实词虚化标记 mVain Vain Marker 离合标记 mSepa Seperation Marker 吃了个饭 (吃 --> 饭) 洗了个澡 (洗 --> 澡) 根节点 Root Root 全句核心节点

各模块技术指标

分词

中文分词指的是将汉字序列切分成词序列的问题。 因为在汉语中，词是承载语义的最基本的单元，分词成了是包括信息检索、文本分类、情感分析等多项中文自然语言处理任务的基础。 由于在自然语言处理框架中的基础地位，很多学者对于中文分词任务进行了深入的研究。 主流的分词算法包括基于词典匹配的方法和基于统计机器学习的方法。 LTP分词模块使用的算法将两种方法进行了融合，算法既能利用机器学习较好的消歧能力，又能灵活地引入词典等外部资源。 在LTP中，我们将分词任务建模为基于字的序列标注问题。 对于输入句子的字序列，模型给句子中的每个字标注一个标识词边界的标记。 同时，为了提高互联网文本特别是微博文本的处理性能。我们在分词系统中加入如下一些优化策略： 英文、URI一类特殊词识别规则 利用空格等自然标注线索 在统计模型中融入词典信息 从大规模未标注数据中统计字间互信息、上下文丰富程度 分词模块在人民日报数据集上的性能如下 准确率 P R F 开发集 0.973152 0.972430 0.972791 测试集 0.972316 0.970354 0.972433 运行时内存：119m 速度：176.91k/s CLP 2012 评测任务1：微博领域的汉语分词，第二名。

词性标注

与分词模块相同，我们将词性标注任务建模为基于词的序列标注问题。 对于输入句子的词序列，模型给句子中的每个词标注一个词性标记。 在LTP中，我们采用的北大标注集。 词性标注模块在人民日报数据集上的性能如下。 语料信息：人民日报1998年2月-6月(后10%数据作为开发集)作为训练数据，1月作为测试数据。 准确率： P 开发集 0.979621 测试集 0.978337 运行时内存：291m 速度：106.14k/s

命名实体识别

与分词模块相同，我们将命名实体识别建模为基于词的序列标注问题。对于输入句子的词序列，模型给句子中的每个词标注一个标识命名实体边界和实体类别的标记。在LTP中，我们支持人名、地名、机构名三类命名实体的识别。 基础模型在几种数据集上的性能如下： 语料信息：人民日报1998年1月数据作为训练集（后10%数据作为开发集），6月前10000句作为训练数据。 准确率 P R F 开发集 0.924769 0.908858 0.916745 测试集 0.942912 0.940538 0.941724 运行时内存：21m

依存句法分析

基于图的依存分析方法由McDonald首先提出，他将依存分析问题归结为在一个有向图中寻找最大生成树（Maximum Spanning Tree）的问题。 在依存句法分析模块中，LTP分别实现了 一阶解码(1o) 二阶利用子孙信息解码(2o-sib) 二阶利用子孙和父子信息(2o-carreras) 在LDC数据集上，三种不同解码方式对应的性能如下表所示。 model 1o 2o-sib 2o-carreras Uas Las Uas Las Uas Las Dev 0.8190 0.7893 0.8501 0.8213 0.8582 0.8294 Test 0.8118 0.7813 0.8421 0.8106 0.8447 0.8138 Speed 49.4 sent./s 9.4 sent./s 3.3 sent./s Mem. 0.825g 1.3g 1.6g SANCL 2012 互联网数据依存句法分析评测，第二、三名。 CoNLL 2009 句法和语义依存分析评测，中文依存句法分析第三名。

语义角色标注

在LTP中，我们将SRL分为两个子任务，其一是谓词的识别（Predicate Identification, PI），其次是论元的识别以及分类（Argument Identification and Classification, AIC）。对于论元的识别及分类，我们将其视作一个联合任务，即将“非论元”也看成是论元分类问题中的一个类别。在SRL系统中，我们在最大熵模型中引入L1正则，使得特征维度降至约为原来的1/40，从而大幅度地减小了模型的内存使用率，并且提升了预测的速度。同时，为了保证标注结果满足一定的约束条件，系统增加了一个后处理过程。 在CoNLL 2009评测数据集上，利用LTP的自动词性及句法信息，SRL性能如下所示。 Precision Recall F-Score Speed Mem. 0.8444 0.7234 0.7792 41.1 sent./s 94M(PI+AIC) CoNLL 2009 句法和语义依存分析评测，联合任务第一名。

© 2013-2015 哈工大社会计算与信息检索研究中心

服务协议与隐私说明

关于我们

语言技术平台

邮件列表

本站使用twitter bootstrap和

django 搭建，

黑ICP备13004464号