本文主要是介绍Hadoop在ebay中的使用历程分享总结,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
概述:
此分享是关于Hadoop在ebay中的使用历程的汇总。作者来自ebay
分享点:
数据包括query log、sellers、buyers、clicks、items/products、feedbacks、Performance、Images、User History、Crawled Data;
数据就是机会;
在ebay解决了单节点问题、更好的资源管理、调度以及虚拟集群管理;
hadoop中增加权限控制以及多租户以满足权限控制;
hadoop主要在用着ebay的新闻检索系统、社交应用、移动应用、爬虫以及日志系统;
Hbase在ebay增强了load balancing,MR调度,HDFS合并;
更多详情参见附件
这篇关于Hadoop在ebay中的使用历程分享总结的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!