中国互联网技术联盟正式成立 京东、美团、 58到家现场分享推荐系统核心技术

本文主要是介绍中国互联网技术联盟正式成立 京东、美团、 58到家现场分享推荐系统核心技术,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

12月19日,中国技术开放日暨中国互联网技术联盟(ITA)启动仪式在北京国家会议中心举行。京东技术学院院长阿朱(原明源软件CTO)、美团技术学院院长刘江(原CSDN总编)及来自联盟企业的多位CTO共同见证了这一刻。

中国互联网技术联盟(ITA)正式启动 


京东技术学院院长阿朱(原明源软件CTO)

京东技术学院院长阿朱,作为中国互联网技术联盟的发起人之一,在启动仪式上讲述了该联盟成立的背后故事。他表示中国互联网技术联盟致力于打造中国更具实效价值的技术研讨、技术推广、技术创新,帮助联盟成员提升在业内的核心技术竞争力和影响力。其主要特色在于免费,且聚焦精英企业。同时他还发布了该联盟未来众多的行动计划。

 

作为联盟的另一位发起人,美团技术学院院长刘江在发言中,通过回顾美团在千团大战中胜利突围的故事,表达了技术对企业成功的重要性。该联盟将十分重视行业技术交流,带来更高层次的技术分享。

 

中国互联网技术联盟运营秘书长谢工介绍了联盟成员的加入及退出机制,及联盟成员的义务。

接下来来自58到家、京东、美团的多位技术专家给参会技术人员分享了各自企业以数据为驱动的个性化推荐的最佳实践。

首先,58到家数据部数据挖掘组负责人王洪权带来了《58到家的推荐系统与推荐技术》主题演讲,分享了推荐系统的选型经验。他表示个性化推荐并不等同于协调过滤,在实际应用中往往可将多种推荐方式结合使用。它被广泛采用因为其有着不依赖产品属性的优势,但同时面临着数据稀疏性、冷启动带来的问题、挑战。同时他还提出了企业在做推荐时可能会遇到诸多问题,如数据量大且动态变化、推荐的精确性和多样性往往难以兼得等。


58到家数据部数据挖掘组负责人 王洪权 

接着,京东推荐平台在线算法组负责人王志勇在演讲中介绍了京东个性化推荐整体框架。个性化推荐离不开在线数据的获取与存储,他详细介绍了京东存储架构所经历的1.0至3.0的演变过程,及每个阶段使用的主要技术。存储1.0,采用Hbase集群作为底层模型数据据存储;Redis集群作为Hot数据的高速缓存;部分关键业务数据pre-load至Redis集群。但因它存在一定的局限,京东自主研发了更好性能的存储系统,即存储2.0,它采用Jim(Jingdong In Memory DB)为内存中心,全管理服务化的数据库,推出故障检测和自动的Failover,支持re-sharding,同时利用RAM+SSD做混合的两级存储。现在京东的存储架构已发展至存储3.0,其Lucene Index使用开源的Stratio Cassandra-Licene-index,将索引服务和特征存储服务融合在相同集群中,同时减少PRC调用次数据,提升召回性能,使服务器资源利用率提高。数据获取后需进行排序,接着他重点介绍了在线Rank架构。

 

京东推荐平台在线算法组负责人 王志勇 

随后,美团高级技术专家曹浩在《O2O领域个性化精准推荐》主题演讲中展示了美团推荐系统的全景图,并从实时推荐,用户、场景建模,Learning to Rank,Interleaving小流量实验机制四个方面介绍了美图推荐核心技术。

 

美团高级技术专家 曹浩 

他表示美团做实时推荐面临着多方面的挑战,如10亿级别推荐系统调用,要求实时计算等,为了解决这些难题,美团采用了负载均衡、并行计算、实时流数据处理等技术手段。接着他介绍了什么是排序学习方法(Learn to Rank)及美团排序模型。他表示美团排序模型经历了人工规则排序、线性模型排序、非线性模型排序三个阶段,非线性模型排序具有自动特征处理、拟合能力更强、适合于多个分数融合的优点,同时它的缺点是训练和预测要慢于线性模型。现在美团采用的是组合模型,利用Tree Model进行未来学习,通过LR进行实时更新。

最后一个演讲来自京东资深技术专家杨骥,他的演讲主要包括京东个性化推荐算法框架、基于矩阵分解的召回、基于图像引擎的召回、排序学习实践四个方面的内容。他表示基于矩阵分解的召回可分六步走,即(1)收集用户行为,包括点击、加购、关注、下单等;(2)对行为进行过滤,比如join(白名单),统计截断,多次加/删购等处理;(3)制定行为评分规则,生成评分矩阵;(4)训练矩阵分解模型;(5)场景过滤;(6)导入缓存。

 

京东资深技术专家 杨骥 

针对基于图像引擎的召回模型,他表示它的数据来源为全站主图,可采用提取特征,图与图之间进行匹配的处理方式,其优点在于只考虑商品的“颜值”,降低了热销影响,同时增加了推荐结果的多样性。每讲一个技术方向,他都结合了具体案例进行现场分析。

这篇关于中国互联网技术联盟正式成立 京东、美团、 58到家现场分享推荐系统核心技术的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/690372

相关文章

Python获取中国节假日数据记录入JSON文件

《Python获取中国节假日数据记录入JSON文件》项目系统内置的日历应用为了提升用户体验,特别设置了在调休日期显示“休”的UI图标功能,那么问题是这些调休数据从哪里来呢?我尝试一种更为智能的方法:P... 目录节假日数据获取存入jsON文件节假日数据读取封装完整代码项目系统内置的日历应用为了提升用户体验,

SpringBoot3实现Gzip压缩优化的技术指南

《SpringBoot3实现Gzip压缩优化的技术指南》随着Web应用的用户量和数据量增加,网络带宽和页面加载速度逐渐成为瓶颈,为了减少数据传输量,提高用户体验,我们可以使用Gzip压缩HTTP响应,... 目录1、简述2、配置2.1 添加依赖2.2 配置 Gzip 压缩3、服务端应用4、前端应用4.1 N

Spring Boot + MyBatis Plus 高效开发实战从入门到进阶优化(推荐)

《SpringBoot+MyBatisPlus高效开发实战从入门到进阶优化(推荐)》本文将详细介绍SpringBoot+MyBatisPlus的完整开发流程,并深入剖析分页查询、批量操作、动... 目录Spring Boot + MyBATis Plus 高效开发实战:从入门到进阶优化1. MyBatis

Java利用JSONPath操作JSON数据的技术指南

《Java利用JSONPath操作JSON数据的技术指南》JSONPath是一种强大的工具,用于查询和操作JSON数据,类似于SQL的语法,它为处理复杂的JSON数据结构提供了简单且高效... 目录1、简述2、什么是 jsONPath?3、Java 示例3.1 基本查询3.2 过滤查询3.3 递归搜索3.4

Python中随机休眠技术原理与应用详解

《Python中随机休眠技术原理与应用详解》在编程中,让程序暂停执行特定时间是常见需求,当需要引入不确定性时,随机休眠就成为关键技巧,下面我们就来看看Python中随机休眠技术的具体实现与应用吧... 目录引言一、实现原理与基础方法1.1 核心函数解析1.2 基础实现模板1.3 整数版实现二、典型应用场景2

查看Oracle数据库中UNDO表空间的使用情况(最新推荐)

《查看Oracle数据库中UNDO表空间的使用情况(最新推荐)》Oracle数据库中查看UNDO表空间使用情况的4种方法:DBA_TABLESPACES和DBA_DATA_FILES提供基本信息,V$... 目录1. 通过 DBjavascriptA_TABLESPACES 和 DBA_DATA_FILES

最新Spring Security实战教程之表单登录定制到处理逻辑的深度改造(最新推荐)

《最新SpringSecurity实战教程之表单登录定制到处理逻辑的深度改造(最新推荐)》本章节介绍了如何通过SpringSecurity实现从配置自定义登录页面、表单登录处理逻辑的配置,并简单模拟... 目录前言改造准备开始登录页改造自定义用户名密码登陆成功失败跳转问题自定义登出前后端分离适配方案结语前言

OpenManus本地部署实战亲测有效完全免费(最新推荐)

《OpenManus本地部署实战亲测有效完全免费(最新推荐)》文章介绍了如何在本地部署OpenManus大语言模型,包括环境搭建、LLM编程接口配置和测试步骤,本文给大家讲解的非常详细,感兴趣的朋友一... 目录1.概况2.环境搭建2.1安装miniconda或者anaconda2.2 LLM编程接口配置2

Python解析器安装指南分享(Mac/Windows/Linux)

《Python解析器安装指南分享(Mac/Windows/Linux)》:本文主要介绍Python解析器安装指南(Mac/Windows/Linux),具有很好的参考价值,希望对大家有所帮助,如有... 目NMNkN录1js. 安装包下载1.1 python 下载官网2.核心安装方式3. MACOS 系统安

Redis 内存淘汰策略深度解析(最新推荐)

《Redis内存淘汰策略深度解析(最新推荐)》本文详细探讨了Redis的内存淘汰策略、实现原理、适用场景及最佳实践,介绍了八种内存淘汰策略,包括noeviction、LRU、LFU、TTL、Rand... 目录一、 内存淘汰策略概述二、内存淘汰策略详解2.1 ​noeviction(不淘汰)​2.2 ​LR