作者：吴桐桐，王贵涛，赵锦铭，刘昭然，漆桂林，李元放 论文发表：EMNLP2022 论文下载：https://arxiv.org/abs/2210.08759 文章来源：知乎@漆桂林 01 背景介绍 随着大数据时代的到来，互联网中每天都会产生海量的信息，且模态多样化。多数的信息为半结构或非结构数据， ....

罗强 字节跳动技术团队 稿 人工智能的三个层次： 运算职能：数据的存储和计算能力，机器远胜于人类。 感知职能：视觉、听觉等能力，机器在语音识别、图像识别领域已经比肩人类。 认知智能：自然语言处理、常识建模与推理等任务，机器还有很长的路要走。 自然语言处理属于认知智能范畴，由于自然语言具有抽象性、组合 ....

目的 概念(Concept)蕴含着世界知识，指导着人类认知的发展，具有抽象性，概括性等特点。 标签的挖掘和标签体系建设也是一个重要的研究问题，尤其是针对UGC/PGC文档的处理更为实用和重要。但是目前的工作主要集中在综合领域的文档中的概念提取，垂直领域的概念标签挖掘的工作相对较少。 另外从推荐系统使 ....

丁香园大数据NLP 稿 前言 文本相似是NLP工业化中的一个基本任务，很多应用需要计算两文本之间的相似程度，包括文本检索中相似文本的去重、问答系统中query与标准模板问题的匹配、句子对语义判断等。 根据不同的标准可以将该任务划分为不同的类别：如根据文本长度的不同，可分为短文本相似度（短语/句子级） ....

作者简介 携程旅游AI研发团队致力于为携程旅游事业部提供丰富的AI技术产品，其中知识图谱组专注旅游领域知识图谱的构建及应用落地。 一、背景介绍 随着网络应用技术的飞速发展，多元化、低密度数据的急剧膨胀对人们获取正确信息带来巨大挑战，大量冗余信息出现的根源在于自然语言表达的多样性，即一词多义和多词同义 ....

分享嘉宾：于倬浩，字节跳动抖音算法部门 整理出品：扬奇智能社区 导读: 中文纠错技术是实现中文语句自动检查、自动纠错的一项重要技术，其目的是提高语言正确性的同时减少人工校验成本。纠错模块作为自然语言处理最基础的模块，其重要程度不言而喻。在日常生活中，我们经常会在微信、微博等社交工具或公众号文章中发现 ....

基于TNIC行业分类计算的波动率指标是解释公司波动和收益的潜在因子可以发现随着TNIC波动的上升（从组1到组5），AbnormalReturn越来越大，也就是说TNIC波动大的股票有更多的AbnormalRe…

[图片] 分享嘉宾：Kevin 腾讯音乐 算法工程师 编辑整理：韦国迎 天虹 出品平台：DataFunTalk 导读： 命名实体识别（Named Entity Recognition，简称NER）是自然语言处理中的热点研究方向之一，目的是识别文本中的命名实体，并将其归纳到相应的实体类型中。命名实体识 ....

AI 算法团队 zacbai 平安寿险 PAI 一、 全文框架概览 [图片] 一、关键短语抽取简介 关键短语抽取 (keyphrase extraction)，指从文章中提取典型的、有代表性的短语，期望能够表达文章的关键内容。 关键短语抽取对于文章理解、搜索、分类、聚类都很重要。而高质量的关键短语抽 ....

问题6：NLG的评估指标有哪些 BLEU (Bilingual Evaluation Understudy) ROUGE (Recall Oriented Understudy for Gisting Evaluation) BLEU是机器翻译中使用最广泛的评估指标，可以看成是精确率，公式如下： [ ....

问题1：神经网络有哪些初始化的方法、为什么要初始化 不初始化可能会减慢收敛速度，影响收敛效果。 如果使用的是预训练模型，是不需要自己进行初始化的，只有没有预训练模型的时候需要初始化。 常用的权重初始化算法是「kaiming_normal」或者「xavier_normal」。 以下n_in为网络的输入 ....

问题1：Bert模型中，根号dk的作用 QK进行点击之后，值之间的方差会较大，也就是大小差距会较大；如果直接通过Softmax操作，会导致大的更大，小的更小；进行缩放，会使参数更平滑，训练效果更好。 问题2：Bert模型中多头的作用 多次attention综合的结果至少能够起到增强模型的作用，也可以 ....

作者：任磊 佳昊 金刚等 美团技术团队 2021年5月，美团NLP中心开源了迄今规模最大的基于真实场景的中文属性级情感分析数据集ASAP，该数据集相关论文被自然语言处理顶会NAACL2021录用，同时该数据集加入中文开源数据计划千言，将与其他开源数据集一起推动中文信息处理技术的进步。 本文回顾了美团 ....

作者：邓旭东HIT 想了解点中文文本处理的底层一些的知识，在网上查了下跟python有关的文本分析书记，意外发现一本新书。 书籍简介 本书是一本研究汉语自然语言处理方面的基础性、综合性书籍，涉及NLP的语言理论、算法和工程实践的方方面面，内容繁杂。 本书包括NLP的语言理论部分、算法部分、案例部分，涉及汉语的发展历史、传统的句法理论、认知语言学理论。需要指出…

[图片] 分享嘉宾：秦川博士 百度人才智库实验室(TIC) 人工智能研究员 编辑整理：于晓涛 农银金科 出品平台：DataFunSummit 导读： 人才是企业发展的核心竞争力，人才管理更是企业最具竞争力的武器。传统招聘中，面临着招聘成本高，效率低等问题，将NLP技术运用在智能招聘领域可以有效地提升 ....

OPPO数智技术 稿 1 问题背景 精准直达的知识问答能力对营造小布“懂知识、更懂你”的形象非常重要。在语音助手场景，经常会出现一词多义或者口语化表达等问题。例如:李白出装，李白的诗，播放李白。第一李白是指游戏角色，第二个是指诗人李白，第三个是指歌曲李白。如何精确识别用户所指、给出正确的答案是小布助 ....

[图片] 分享嘉宾：陈开江 贝壳找房 算法架构师 编辑整理：刘贝尔 匈牙利佩奇大学 出品平台：DataFunTalk 导读： 在人工智能应用高速发展的现代服务业，实现机器对人的辅助与一定程度上的替代，即人机耦合 ( Human Machine Coupling )，是文明进步的趋势。而在衣食住行等与 ....

Bert 最近很火，应该是最近最火爆的 AI 进展，网上的评价很高，那么 Bert 值得这么高的评价吗？我个人判断是值得。那为什么会有这么高的评价呢？是因为它有重大的理论或者模型创新吗？其实并没有，从模型创新角度看一般，创新不算大。但是架不住效果太好了，基本刷新了很多 NLP 的任务的最好性能，有些 ....