作者：张荣华 编辑：陶家龙、孙淑娟 从学生开始老师就教导我们什么是问题？如何找出标准答案。然而，经过十几年的学习，大多数人依然没有理解问题的本质。正确定义问题是成功的开始，更是成功架构师的必要条件。 [图片] 今天，阿里资深技术专家张荣华从问题的本质入手，用“升层思维”解决问题，告诉我们创新的核心， ....

[图片] 桔妹导读： Presto 在滴滴内部发展三年，已经成为滴滴内部 Ad-Hoc 和 Hive SQL 加速的首选引擎。目前服务 6K+ 用户，每天读取 2PB ~ 3PB HDFS 数据，处理 30 万亿~35 万亿条记录，为了承接业务及丰富使用场景，滴滴 Presto 需要解决稳定性、易用 ....

一、引言 提起分布式，不少人能很清晰的阐述 paxos、CAP 等理论，但我们在遇到一个具体的分布式问题时，很少有人能知道如何做出一个“好”的设计。对于当前的很多分布式数据系统，包括开源的 HBase、Elasticsearch 等，我们一般只知其然，很少能够知其所以然。因为几乎所有的分布式数据系统 ....

摘要：如果 Consumer 端消费消息失败，那么 RocketMQ 是如何对失败的异常情况进行处理？ 前面两篇 RocketMQ 消息消费（一）/（二）篇，主要从 Push/Pull 两种消费模式的简要流程、长轮询机制和 Consumer 端负载均衡这几点内容出发，介绍了 RocketMQ 消息消 ....

作者：Rachel Thomas 编译：ronghuaiyang 导读 导读： 验证集的划分真的就是调用一个 train_test_split 函数这么简单么，其实并不是。 正文: 一个非常常见的场景：一个看起来非常好的机器学习模型在现实的生产环境中使用时是完全失败的。其后果包括老板对现在的机器学习 ....

作者：Netflix Technology Blog 编译：ronghuaiyang 英文原文：https://netflixtechblog.com/selecting-the-best-artwork-for-videos-through-a-b-testing-f6155c4595f6 导读： ....

孙伟@Dell Flink 中文社区 摘要：本文整理自 Dell 科技集团高级软件研发经理孙伟在 4 月 17 日 上海站 Flink Meetup 分享的《Iceberg 和对象存储构建数据湖方案》。内容包括： 数据湖和 Iceberg 简介 未来规划 演示方案 存储优化的一些思考 一、数据湖和 ....

[图片] 架构、搜索、推荐、广告系统优质资源整理 AI 架构、搜索系统、 推荐系统、广告系统等技术资料整理。这篇文章意图是收集市面上质量不错的后端架构、AI 架构、搜索、 推荐、 广告引擎技术资料，内容来源包括开源项目官网（Lucene、Solr、Elastic）、综合技术网站（AIQ 、infoQ ....

[图片] 桔妹导读： 滴滴的路线引擎每天要处理超过 400 亿次的路线规划请求，路径规划是滴滴地图输出的核心服务之一。不同于传统的路径规划算法，本文主要介绍的是一次深度强化学习在路径规划业务场景下的探索，目标是为用户规划出最符合司乘双方习惯的路线，降低偏航率。 当我们打开滴滴使用网约车服务时，出发前 ....

文章摘要：MQ 分布式消息队列大致流程在于消息的一发一收一存，本篇将为大家主要介绍下 RocketMQ 存储部分的架构 消息存储是 MQ 消息队列中最为复杂和最为重要的一部分，所以小编也就放在 RocketMQ 系列篇幅中最后一部分来进行阐述和介绍。本文先从目前几种比较常用的 MQ 消息队列存储方式 ....

58 数据平台部 58 技术 导读： 58 同城大数据团队，鉴于目前线上大数据集群各个组件 GC 方面的问题，考虑逐步在适合的大数据组件上应用高版本 JDK 上的 ZGC，目前已经在 HBase 集群上成功落地，在某些场景上有比较明显的效果。58 同城 HBase 集群应用的 JDK 为腾讯公司开源 ....

[图片] 作者：Eric He 编译：ronghuaiyang 导读: 这是 Rocketmiles 的搜索排名序列的第二部分。 Why we chose LambdaMART for our hotel ranking model Part 2 of Rocketmiles’ search res ....

阿里近几年公开的推荐领域算法可真不少，既有传统领域的探索如 MLR 算法，还有深度学习领域的探索如 entire -space multi-task model，Deep Interest Network 等，同时跟清华大学合作展开了强化学习领域的探索，提出了 MARDPG 算法。从本篇开始，我们就 ....

石晓文的学习日记 发表时间： 2018.06.26 阿里近几年公开的推荐领域算法有许多，既有传统领域的探索如 MLR 算法，还有深度学习领域的探索如 entire -space multi-task model，Deep Interest Network 等，同时跟清华大学合作展开了强化学习领域的探 ....

上期： 贝壳找房【深度语义匹配模型 】原理篇一：表示型 上期我们介绍了六种表示型的深度语义匹配模型，本期将为大家带来六种交互型的深度语义匹配模型。 一、前篇回顾 上期我们介绍了六种表示型的深度语义匹配模型，表示型的模型更侧重于对表示层的构建，其特点是对将要匹配的两个句子分别进行编码与特征提取，最后进 ....

分享嘉宾：凤凰新媒体广告算法团队 编辑整理：陈道昌 内容来源：2019 DataFun Live 01 出品社区：DataFun [图片] 导读： 广告算法在优化点击率和竞价机制等提升平台收益的过程中，如果不能保证广告主转化的质和量就会影响到平台生态的稳定发展，因此在 CPC 的基础上，我们探索了 ....

[图片] 配套 PPT 下载，请识别底部二维码关注社区公众号，后台回复【1212】 分享嘉宾：舒鹏 搜狗 专家研究员 编辑整理：王彦斐 内容来源：DataFun AI Talk《深度学习新技术在搜狗搜索广告中的深化应用》 出品社区：DataFun 注：欢迎转载，转载请注明出处。 大家好，我是来自搜狗 ....

作者：amitness 编译：ronghuaiyang 导读: ALBERT 作为 BERT 的一个变体，在保持性能的基础上，大大减少了模型的参数，使得实用变得更加方便，是经典的 BERT 变体之一。 BERT 的 youxiu 变体：ALBERT 论文图解介绍 考虑下面给出的句子。作为人类，当我们 ....