在人机交互中,想避免上面这样的连环误解,就需要机器能够准确地理解语言,而自然语言处理(NLP)就能提供解决这一问题的有效途径。
现在,由科大讯飞能力星云计划的优秀AI服务合作伙伴,云孚科技提供的词法分析(包含分词、词性标注、命名实体识别)、依存句法分析、语义角色标注、语义依存分析6项能力在讯飞开放平台上线!让你可以开发的产品具有强大的自然语言处理能力!
词、句、语义,三类分析对象全覆盖
本次上线的词法分析、依存句法分析、语义角色标注、语义依存分析,覆盖词法、句法、语义,带来更全面、更精准的自然语言处理体验。
词法分析
词法分析提供分词、词性标注、命名实体识别,全面支撑机器对定位基本语言元素的理解与分析。
1分词
指的是将汉字序列切分成词序列。汉语中,词是承载语义的最基本的单元。分词是信息检索、文本分类、情感分析等多项中文自然语言处理任务的基础。
2词性标注
是指为自然语言文本中的每个词汇赋予一个词性的过程。
分词&词性标注示例
3命名实体识别
是在句子的词序列中定位并识别人名、地名、机构名等实体。
依存句法分析
句子中有“主谓宾”、“定状补”这些不同的语法成分,依存语法 (Dependency Parsing, DP)识别句子中的语法成分,然后分析各成分之间的关系(如主谓、动宾、定中等结构关系),并用树状结构来表示整句的句法结构(如主谓宾、定状补等)
如图所示,句子中各成分之间的SBV(主谓关系)、ADV(状中结构)等关系被显示出来。
语义角色标注
语义角色标注 (Semantic Role Labeling, SRL) 是一种浅层的语义分析技术,标注句子中某些短语为给定谓词的论元 (语义角色) ,如施事者、受事者、经验者、时间和地点等。
如图,谓词是“去”、“踢”时,“明天晚上8点”均是它们的时间(一般用TMP表示)
语义角色标注以句子的谓词为中心,分析句子中各成分与谓词之间的关系,即句子的谓词(Predicate)- 论元(Argument)结构,并用语义角色来描述这些结构关系。
语义依存分析
语义依存分析 (Semantic Dependency Parsing, SDP)分析句子各个语言单位之间的语义关联,并将语义关联以依存结构呈现。语义依存分析不受句法结构影响,将具有直接语义关联的语言单元直接连接依存弧并标记上相应的语义关系。
如图,“喝”是全句核心节点(Root),它与“玉米汤”是受事关系(Pat),与我是施事关系(Agt)
使用语义依存刻画句子语义,优势在于不需要去抽象词汇本身,而是通过词汇所承受的语义框架来描述该词汇,而论元的数目相对词汇来说数量总是少了很多的。
语义依存分析目标是跨越句子表层句法结构的束缚,直接获取深层的语义信息。
词法分析、依存句法分析、语义角色标注、语义依存分析基于一整套中文自然语言处理基础开放系统,具有技术领先、接入简单、服务稳定等优势。
技术领先
中文自然语言处理基础开放系统由哈工大社会计算与信息检索研究中心历时十年研制,多次在国内外技术评测中取得优秀成绩。
接入简单便捷
无需下载 SDK,提供WEB API接口,可供开发者进行跨平台调用。
服务稳定
服务稳定,吞吐量大,为广大用户提供电信级稳定性和支持全国范围网络接入服务。
应用场景广泛
本次上线的几项自然语言处理能力,以其精准高效的优势,可以应用于丰富的场景中。
搜索引擎
通过分词、词性标注及命名实体识别,对一个或多个搜索关键词进行更深入分析,提供更精确的搜索结果。
内容审核
通过词性标注和命名实体识别,可以筛选出敏感与违禁词汇。
舆情监测
通过对网络内容进行分词和词性标注,捡出高频关键词,能更好的挖掘社会舆论风向。
语病检查
通过依存句法分析、语义角色标注及语义依存分析,可以查出语言中不通顺的句子和不准确的语义。同时分词、词性分析、命名实体识别可以对不当用词等进行筛选。
语义理解
通过语义依存分析和语义角色标注,分析一段话的语义,提取其主干信息,帮助更好的理解用户意图。
机器翻译
通过分词、词性标注和命名实体识别,可进行逐词翻译,再根据依存句法分析和语义分析的能力整理和修改,得到准确的全句翻译结果。
问答系统
通过语义依存分析对提出的问题,从而理解意图,找到最为匹配的答案。
智能客服
以分词和词性标注为基础,分析语音命令中的分词,可以更加准确理解文字的含义,更好的进行客服服务。
AI能力星云,与优秀技术厂商双向赋能
除了自研能力,科大讯飞还与业内优秀的技术厂商进行战略互补形式的合作。带来能力星云计划。
讯飞开放平台自2010年成立以来,经过8年的积累,现已开放近百项AI能力,赋能88万开发者团队。在能力星云中,AI服务合作伙伴通过讯飞开放平台的桥梁,为更多的AI开发者和爱好者提供服务,让技术为在更多场景中落地,为各行业赋能。
AI服务合作伙伴在能力星云中拥有:
官网专栏产品页
讯飞开放平台上线AI能力详情页,产品介绍,接入流程,能力提供方等信息一应俱全!
全渠道推广宣传
线上渠道,线下市场活动,会针对AI服务合作伙伴的产品进行全网宣传和推广,扩大影响力,吸引更多开发者使用AI能力!
商机即时对接
专业团队负责商机梳理和对接,AI新能力商机将会即时处理,定期同步给AI服务合作伙伴,带来更多商业资源引流。
共享开放平台开发者
讯飞开放平台丰富的开发者将率先体验AI新能力,并应用在产品中,形成更多的合作案例以及解决方案!
未来,能力星云将让厂商的实用级核心技术陆续与讯飞的核心能力一起,汇聚成AI能力的星云,释放巨大的组合效应!
全部0条评论
快来发表一下你的评论吧 !