中国互联网技术联盟正式成立 京东、美团、 58到家现场分享推荐系统核心技术

本文主要是介绍中国互联网技术联盟正式成立 京东、美团、 58到家现场分享推荐系统核心技术,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

12月19日,中国技术开放日暨中国互联网技术联盟(ITA)启动仪式在北京国家会议中心举行。京东技术学院院长阿朱(原明源软件CTO)、美团技术学院院长刘江(原CSDN总编)及来自联盟企业的多位CTO共同见证了这一刻。

中国互联网技术联盟(ITA)正式启动 


京东技术学院院长阿朱(原明源软件CTO)

京东技术学院院长阿朱,作为中国互联网技术联盟的发起人之一,在启动仪式上讲述了该联盟成立的背后故事。他表示中国互联网技术联盟致力于打造中国更具实效价值的技术研讨、技术推广、技术创新,帮助联盟成员提升在业内的核心技术竞争力和影响力。其主要特色在于免费,且聚焦精英企业。同时他还发布了该联盟未来众多的行动计划。

 

作为联盟的另一位发起人,美团技术学院院长刘江在发言中,通过回顾美团在千团大战中胜利突围的故事,表达了技术对企业成功的重要性。该联盟将十分重视行业技术交流,带来更高层次的技术分享。

 

中国互联网技术联盟运营秘书长谢工介绍了联盟成员的加入及退出机制,及联盟成员的义务。

接下来来自58到家、京东、美团的多位技术专家给参会技术人员分享了各自企业以数据为驱动的个性化推荐的最佳实践。

首先,58到家数据部数据挖掘组负责人王洪权带来了《58到家的推荐系统与推荐技术》主题演讲,分享了推荐系统的选型经验。他表示个性化推荐并不等同于协调过滤,在实际应用中往往可将多种推荐方式结合使用。它被广泛采用因为其有着不依赖产品属性的优势,但同时面临着数据稀疏性、冷启动带来的问题、挑战。同时他还提出了企业在做推荐时可能会遇到诸多问题,如数据量大且动态变化、推荐的精确性和多样性往往难以兼得等。


58到家数据部数据挖掘组负责人 王洪权 

接着,京东推荐平台在线算法组负责人王志勇在演讲中介绍了京东个性化推荐整体框架。个性化推荐离不开在线数据的获取与存储,他详细介绍了京东存储架构所经历的1.0至3.0的演变过程,及每个阶段使用的主要技术。存储1.0,采用Hbase集群作为底层模型数据据存储;Redis集群作为Hot数据的高速缓存;部分关键业务数据pre-load至Redis集群。但因它存在一定的局限,京东自主研发了更好性能的存储系统,即存储2.0,它采用Jim(Jingdong In Memory DB)为内存中心,全管理服务化的数据库,推出故障检测和自动的Failover,支持re-sharding,同时利用RAM+SSD做混合的两级存储。现在京东的存储架构已发展至存储3.0,其Lucene Index使用开源的Stratio Cassandra-Licene-index,将索引服务和特征存储服务融合在相同集群中,同时减少PRC调用次数据,提升召回性能,使服务器资源利用率提高。数据获取后需进行排序,接着他重点介绍了在线Rank架构。

 

京东推荐平台在线算法组负责人 王志勇 

随后,美团高级技术专家曹浩在《O2O领域个性化精准推荐》主题演讲中展示了美团推荐系统的全景图,并从实时推荐,用户、场景建模,Learning to Rank,Interleaving小流量实验机制四个方面介绍了美图推荐核心技术。

 

美团高级技术专家 曹浩 

他表示美团做实时推荐面临着多方面的挑战,如10亿级别推荐系统调用,要求实时计算等,为了解决这些难题,美团采用了负载均衡、并行计算、实时流数据处理等技术手段。接着他介绍了什么是排序学习方法(Learn to Rank)及美团排序模型。他表示美团排序模型经历了人工规则排序、线性模型排序、非线性模型排序三个阶段,非线性模型排序具有自动特征处理、拟合能力更强、适合于多个分数融合的优点,同时它的缺点是训练和预测要慢于线性模型。现在美团采用的是组合模型,利用Tree Model进行未来学习,通过LR进行实时更新。

最后一个演讲来自京东资深技术专家杨骥,他的演讲主要包括京东个性化推荐算法框架、基于矩阵分解的召回、基于图像引擎的召回、排序学习实践四个方面的内容。他表示基于矩阵分解的召回可分六步走,即(1)收集用户行为,包括点击、加购、关注、下单等;(2)对行为进行过滤,比如join(白名单),统计截断,多次加/删购等处理;(3)制定行为评分规则,生成评分矩阵;(4)训练矩阵分解模型;(5)场景过滤;(6)导入缓存。

 

京东资深技术专家 杨骥 

针对基于图像引擎的召回模型,他表示它的数据来源为全站主图,可采用提取特征,图与图之间进行匹配的处理方式,其优点在于只考虑商品的“颜值”,降低了热销影响,同时增加了推荐结果的多样性。每讲一个技术方向,他都结合了具体案例进行现场分析。

这篇关于中国互联网技术联盟正式成立 京东、美团、 58到家现场分享推荐系统核心技术的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/690372

相关文章

Python中常用的四种取整方式分享

《Python中常用的四种取整方式分享》在数据处理和数值计算中,取整操作是非常常见的需求,Python提供了多种取整方式,本文为大家整理了四种常用的方法,希望对大家有所帮助... 目录引言向零取整(Truncate)向下取整(Floor)向上取整(Ceil)四舍五入(Round)四种取整方式的对比综合示例应

前端 CSS 动态设置样式::class、:style 等技巧(推荐)

《前端CSS动态设置样式::class、:style等技巧(推荐)》:本文主要介绍了Vue.js中动态绑定类名和内联样式的两种方法:对象语法和数组语法,通过对象语法,可以根据条件动态切换类名或样式;通过数组语法,可以同时绑定多个类名或样式,此外,还可以结合计算属性来生成复杂的类名或样式对象,详细内容请阅读本文,希望能对你有所帮助...

Python爬虫selenium验证之中文识别点选+图片验证码案例(最新推荐)

《Python爬虫selenium验证之中文识别点选+图片验证码案例(最新推荐)》本文介绍了如何使用Python和Selenium结合ddddocr库实现图片验证码的识别和点击功能,感兴趣的朋友一起看... 目录1.获取图片2.目标识别3.背景坐标识别3.1 ddddocr3.2 打码平台4.坐标点击5.图

Java中实现订单超时自动取消功能(最新推荐)

《Java中实现订单超时自动取消功能(最新推荐)》本文介绍了Java中实现订单超时自动取消功能的几种方法,包括定时任务、JDK延迟队列、Redis过期监听、Redisson分布式延迟队列、Rocket... 目录1、定时任务2、JDK延迟队列 DelayQueue(1)定义实现Delayed接口的实体类 (

shell脚本自动删除30天以前的文件(最新推荐)

《shell脚本自动删除30天以前的文件(最新推荐)》该文章介绍了如何使用Shell脚本自动删除指定目录下30天以前的文件,并通过crontab设置定时任务,此外,还提供了如何使用Shell脚本删除E... 目录shell脚本自动删除30天以前的文件linux按照日期定时删除elasticsearch索引s

TP-Link PDDNS服将于务6月30日正式停运:用户需转向第三方DDNS服务

《TP-LinkPDDNS服将于务6月30日正式停运:用户需转向第三方DDNS服务》近期,路由器制造巨头普联(TP-Link)在用户群体中引发了一系列重要变动,上个月,公司发出了一则通知,明确要求所... 路由器厂商普联(TP-Link)上个月发布公告要求所有用户必须完成实名认证后才能继续使用普联提供的 D

linux进程D状态的解决思路分享

《linux进程D状态的解决思路分享》在Linux系统中,进程在内核模式下等待I/O完成时会进入不间断睡眠状态(D状态),这种状态下,进程无法通过普通方式被杀死,本文通过实验模拟了这种状态,并分析了如... 目录1. 问题描述2. 问题分析3. 实验模拟3.1 使用losetup创建一个卷作为pv的磁盘3.

MySQL8.2.0安装教程分享

《MySQL8.2.0安装教程分享》这篇文章详细介绍了如何在Windows系统上安装MySQL数据库软件,包括下载、安装、配置和设置环境变量的步骤... 目录mysql的安装图文1.python访问网址2javascript.点击3.进入Downloads向下滑动4.选择Community Server5.

CentOS系统Maven安装教程分享

《CentOS系统Maven安装教程分享》本文介绍了如何在CentOS系统中安装Maven,并提供了一个简单的实际应用案例,安装Maven需要先安装Java和设置环境变量,Maven可以自动管理项目的... 目录准备工作下载并安装Maven常见问题及解决方法实际应用案例总结Maven是一个流行的项目管理工具

MySQL 缓存机制与架构解析(最新推荐)

《MySQL缓存机制与架构解析(最新推荐)》本文详细介绍了MySQL的缓存机制和整体架构,包括一级缓存(InnoDBBufferPool)和二级缓存(QueryCache),文章还探讨了SQL... 目录一、mysql缓存机制概述二、MySQL整体架构三、SQL查询执行全流程四、MySQL 8.0为何移除查