转载自 有赞技术团队博客 上文说到有赞搜索系统的架构演进，为了支撑不断演进的技术架构，除了 Elasticsearch 的维护优化之外，我们也开发了上层的中间件来应对不断提高的稳定性和性能要求。 Elasticsearch 的检索执行效率可以表示为： _O(num_of_files _logN)* ....

1. Reactor 模式 Kafka 网络层采用的是 Reactor 模式，是一种基于事件驱动模式。对应于 Java 的 NIO 提供了 Reactor 模式的 API.常见的单线程 Java NIO 的线程模型为 [图片] 流程： 首先创建 ServerSocketChannel 对象并在 Se ....

公众号 欢迎关注：CS 的陋室 搜索做了很多年，但是在各种技术革新下也还总有东西做，总有提升点，虽然现在媒体炒的少了，但是至今仍然各种公司仍花费大力气来做这个搜索。这次和大家介绍的东西，来自于美团技术团队分享的一篇文章，这篇文章讨论了搜索的理解和召回，有意思的是他还对整个他们的现状分析进行了讲解，这 ....

[图片] 分享嘉宾：贺小令 阿里巴巴技术专家 编辑整理：王吉东 内容来源：Flink Forward ASIA 出品平台：DataFun 导读： 本次分享的主题为 Apache Flink 新场景——OLAP 引擎，主要内容包括： 背景介绍 Apache Flink OLAP 引擎 案例介绍 未来计 ....

[图片] DataCanvas 布道师团队成员 首席解决方案架构师 周晓凌 此番呈上 利用数据科学平台解决运筹学问题 不仅仅是机器学习 近年来机器学习与深度学习快速发展，极大地吸引了人们的眼球，甚至有将人工智能（AI）等价于深度学习的趋势。然而人工智能的范畴相较于机器学习与深度学习要大得多，吴恩达在 ....

作者： 龚俊民(昵称： 除夕) 学校： 新南威尔士大学 单位：Vivo AI LAB 算法实习生 方向： 自然语言处理和可解释学习 知乎： https://www.zhihu.com/people/gong-jun-min-74 [图片] 前言： 上一期我们讲了成分句法分析，它相当于考虑广义上的嵌套 ....

本文来源于微信公众号：LinkedIn 微信 ID：LinkedIn-China LinkedIn 领英是全球知名的职业社交网站，每个《财富》500 强公司均有高管加入。 《北京女子图鉴》里面有一句经典的台词：北京就是一个标准不一的地方，你想要什么标准，就按照什么标准去努力。 这句话，真的太鸡血了。 ....

[图片] 一次生产系统 Full GC 问题分析与排查总结 背景 最近某线上业务系统生产环境频频 CPU 使用率过低，频繁告警，通过重启可以缓解，但是过了一段时间又会继续预警，线上两个服务节点相继出现 CPU 资源紧张，导致服务器卡死不可用，通过告警信息可以看到以下问题： [图片] 从上图可以看到， ....

“ 这两年深度模型大火之后，各个团队都卯足了劲把网络规模做大做深，花了很大力气好不容易离线 auc 涨了不少，上线一看效果 ctr 和 cpm 反而下降。本文例举几种可能的原因和解决办法。” 作者：辛俊波 腾讯高级研究员 专注推荐/广告/深度学习原文链接：https://www.zhihu.com/ ....

分享嘉宾：李国洪 百度资深研发工程师 编辑整理：李斌 出品平台：DataFunTalk 导读： 2010 年随着 iphone4 的发布，智能手机被广泛使用，从大学生到老人小孩，移动互联网的发展如火如荼。近两年，5G 技术让下载速度变得越来越快，相较于传统的文本搜索技术，语音搜索和图片搜索等新型搜索 ....

以下文章来源于搜索与推荐 Wiki ，作者 Thinkgamer 文本特征在内容平台内使用的场景和方式更多，但并不等于说其在其他形式的平台中无用户之地，比如：电商平台中的商品标题、商品介绍、评论等，商品平台中视频标题、视频介绍、评论等。 利用文本数据可以做的事情很多，包括但不局限于：关键词提取、文本 ....

作者： 石晓文，中国人民大学信息学院在读研究生 个人公众号：小小挖掘机（ID:wAIsjwj） 好久没更新该系列了，最近看到了一篇关于神经协同过滤的论文，感觉还不错，跟大家分享下。 论文地址：https://www.comp.nus.edu.sg/~xiangnan/papers/ncf.pdf 1 ....

作者： 黄鸿波 在企业中，我们做模型的目的就是为了能够让它来更好的解决产品在实际生产过程中所遇到的具体的问题，而模型训练好之后，下一步要做的就是将其部署上线。AI 对于很多企业来讲是一个新的领域，所以很多企业在训练好一个模型之后，对于模型部署方面总是会显得束手无策。 在企业中，我们所做的 AI 项目 ....

2018-12-01 原创：孙要飞 背景：2017 年底到 2018 年初，公司战略调整，业务量及业务复杂度预期会有较大增长；面对新的挑战，搜索团队对整个搜索平台进行了重写，针对旧系统的一些问题，主要从可配置，异步化，并发，可扩展，全链路追踪，业务隔离等方面进行了设计。 1. 总体架构 如下图所示， ....

阅读原文 BytesRefHash 类是专门为 BytesRef 对象作优化的一种类似 hashMap 的数据结构，该类的主要用途就是将所有的 BytesRef 对象存储到一个连续的存储空间中，并且使得能在查询阶段达到 0(1)的时间复杂度。 BytesRefHash 的一些变量 byte[] [] ....

基本概念 Segments in Lucene 众所周知，Elasticsearch 存储的基本单元是 shard， ES 中一个 Index 可能分为多个 shard， 事实上每个 shard 都是一个 Lucence 的 Index，并且每个 Lucence Index 由多个 Segment ....

分享嘉宾：连义江博士@百度 编辑整理：王成林 出品平台：DataFunTalk 导读： 关键词匹配位于整个搜索广告系统的上游，负责将 query 和 keyword 按照广告主要求的匹配模式连接起来。该问题面临着语义鸿沟，匹配模式判定和可扩展性方面的挑战。在本文，我们会就同义变换这个主题展开讨论，讲 ....

作者：JayLou 娄杰 [图片] 预训练模型(Pre-trained Models,PTMs) 的出现将 NLP 带入了一个全新时代。2020 年 3 月 18 日，邱锡鹏老师发表了关于 NLP 预训练模型的综述《Pre-trained Models for Natural Language Pr ....

[图片] 分享嘉宾：崇懿 阿里文娱 技术专家 编辑整理：李沛欣 内容来源：阿里文娱技术 出品平台：DataFunTalk 导读： 多级多模态引擎是为推荐搜索定制的专业化的召回引擎。优酷视频搜索在基础的文本 Query 搜索系统的基础上，不断探索视频搜索的特色，在多模态输入、多级多模态索引、跨模态检索 ....