电商狂热者如何通过Qubole将云成本降低70%,开发时间降低60%

电商狂热者如何通过Qubole将云成本降低70%,开发时间降低60%

支持自己的五个体育商品品牌的网站,以及全球600多个合作网站, 狂热的 基于云计算的电子商务平台 每天处理数十亿数据点.

Raj Tanneru, 狂热者数据工程总监, 估计他们平均每天处理5tb的数据, 一周七天. 保持狂热者的竞争优势, Tanneru和他的团队不断地构建和修改数据管道,以更好地支持:

  • Visitor-specific产品排名
  • 个性化邮件产品推荐
  • 网站特性实验
  • 特别的查询
  • 业务报告

降低数据处理成本是狂热者的首要任务. 所以他们才求助于Qubole. Qubole是 开放数据湖公司 这提供了一个开放、简单和安全的环境 数据平台湖 机器学习, 流分析、数据探索和特别分析.

对狂热者

狂热者  它是授权体育商品的全球领导者吗. 他们提供最大的永恒和及时的粉丝商品收藏, 是否网上购物, 在你的手机上, 在商店里, 在体育馆里, 或者是世界上最大的体育赛事的现场. 狂热的创新, tech-infused, 在当今按需定制的文化下,多渠道生产和销售体育商品的方式正在改变球迷购买他们最喜欢的球队服装和球衣的方式. 他们的品牌- 狂热者, FansEdge, 行囊, Majestic和狂热者 Authentic -定位独特,以满足全球粉丝日益增长的实时需求. 狂热者的目标是成为全球领先的云商务平台, 支持世界各地的体育商品电子商务网站.

个性化产品与每个客户的相关性

狂热者最大的数据任务之一是对数百个产品目录中的产品进行排序和排名,向每个网站访问者展示与他们最相关的产品.

相关性和排名可以基于个人的购买历史, 搜索历史记录, 客户资料(位置, 喜爱的球队, 等.)、产品知名度,以及访问者的搜索词. 使用Qubole, Tanneru的团队可以快速建立和修改数据管道,将产品评分与机器学习模型整合在一起,为每个在线购物者提供与他们的需求高度相关的一目了然的选择, 偏好和购买模式.

之前采用Qubole, 狂热者有一个批处理系统用于产品评分, 但他们正在寻找提高效率的方法. 他们尝试了一种实时评分系统,但从未将其投入生产. 他们觉得离线批处理系统更适合他们.

切换到Qubole不仅节省了狂热者建造得分管道的时间. 他们还对数据有了更深入的了解,并从计算中获得了更高的成本效益.

提高实验效率

Qubole帮助狂热者的另一个领域是测试其网站的新功能.

在推广任何新网站功能之前,狂热者都会进行广泛的A/B测试1 与一系列主要工作表现指标(kpi)进行比较. 这些kpi包括转化率、利润率和每次访问的收益等指标. 在采用Qubole之前, 狂热者不得不使用第三方工具研究测试数据,并手动生成报告. 这造成了重大的决策延误, 除了在解释和改进测试时的中断之外.

现在, Tanneru的团队在Qubole内部构建复杂的工作流程,以在很短的时间内生成所需的kpi. 狂热者的A/B测试团队每小时将网站跟踪信息发送到他们的数据湖. 管道, 策划在Qubole, 自动生成个性化报告中的kpi, 如何帮助狂热者的业务团队对这些功能做出近乎实时的决策. Tanneru说 自动化在Qubole 在实验中节省了大量的时间吗.

 

1“A/B测试”是对两个变量(“A”和“B”)进行简单的对照实验. http://en.维基百科.org/wiki/A/B_testing

在成本效益方面,权威推荐全球最大网赌正规平台在AWS EMR上并没有取得很好的成功. 这就是Qubole为权威推荐全球最大网赌正规平台工作的原因之一.

Raj Tanneru, 狂热者公司数据工程总监

生成电子邮件推荐的速度快60%,成本低25%

狂热者还使用Qubole通过电子邮件自动向注册网站用户发送购买建议. 他们的推荐引擎不仅考虑了用户之前的网站体验,还考虑了用户可能没有见过的新产品和其他项目. 它甚至可以使用大型体育赛事(如超级碗和其他全球体育赛事)的实时结果,通过球迷的兴奋和参与来获取销量.

采用Qubole后,狂热者将他们的电子邮件处理和分割业务转移到 Qubole上的Apache火花. 这帮助该公司将这项任务的端到端处理时间削减了60%以上——从13个小时降到5个小时,云计算成本降低了25%以上.

寻求更高的效率

因为它们构建的数据管道非常复杂, 坦纳鲁和他的团队一直在寻找提高效率的新方法. Tanneru说他们对探索RubiX特别感兴趣, Qubole云平台开源数据缓存框架. 开发RubiX的目的是通过将频繁访问的数据缓存到本地计算节点,从而消除网络I/O延迟. 在这种情况下 Qubole上的Apache火花, 通过减少对对象存储的往返调用, Rubix可以将其性能提高300%.

大量节省时间和云成本

减少数据处理时间和控制云成本是狂热者业务成功的关键. 据坦纳鲁说,Qubole在这两方面都发挥了重要作用.

Qubole很简单, 开放, 安全平台和近乎零的管理——以及它的api, 与第三方解决方案的预构建集成, 以及数据科学的现成工具, 数据工程和分析——为狂热者节省了开发数据管道的大量时间, 了解他们的数据, 创建业务报告, 建立机器学习模型.

同时, 这要归功于Qubole的自适应无服务器平台——它提供了工作负载感知的自动伸缩, 自动化集群生命周期管理, 和 智能现场管理-Tanneru说狂热者现在使用大约80%的AWS Spot实例,而仅使用20%的On-Dem和实例. 通过允许他们以一种高效和自动化的方式使用具有更高比例的低价Spot实例的异构集群, Qubole使狂热者的整体云成本降低了70%以上.

坚实的支持和改变游戏规则的解决方案

Tanneru将狂热者节省的大量时间和成本归功于Qubole技术支持团队提出的解决方案.

其中一个解决方案就是Sparklens, Qubole为Apache火花开发的开源调优工具. 在被介绍给Sparklens之后, Tanneru说, 他和他的团队能够更好地集中精力优化他们的数据管道.

“使用原生Spark UI来识别数据倾斜等问题并不是很简单. 有一个DAG(有向无环图), 但总的来说, Spark UI中的可视化并不是很有帮助,”Tanneru说. “缺少一个分析工具——对应用程序有真正的了解. 有了Sparklens,你可以找出问题并迅速解决它们. Qubole的闪亮服务改变了权威推荐全球最大网赌正规平台的游戏规则.”

Qubole的闪亮服务改变了权威推荐全球最大网赌正规平台的游戏规则.

Raj Tanneru, 狂热者公司数据工程总监

坦纳鲁还称赞Qubole的支持团队帮助狂热者减少了AWS Spot的损失,从而节省了资金. 他说Qubole向他们介绍了识别和优化AWS计算实例的工具和技术,这些实例具有较高的AWS Spot损耗. 这些建议还向狂热者展示了如何优化Qubole的智能Spot管理功能, 这将帮助客户节省高达80%的云计算成本, 不管选择什么云. “Qubole在权威推荐全球最大网赌正规平台对数据管道进行的一些优化中非常有帮助,”Tanneru说.

下载这个案例研究的PDF版本.

关于Qubole

Qubole正在彻底改变企业激活数据的方式,即在企业内部积极使用数据的过程. 借助Qubole的云原生大数据平台, 公司以指数级的速度激活pb级数据, 适用于所有人和任何用例, 同时不断降低成本. Qubole克服了扩大用户的挑战, 用例, 数据的多样性和数量受到预算有限和全球大数据技能短缺的限制. Qubole提供了唯一一个提供选择自由的平台, 消除遗留锁在-使用任何引擎, 任何工具, 以及满足您公司需求的任何云计算. Qubole的投资者包括CRV, 和谐的合作伙伴, IVP, 光速创业合作伙伴, 西北银行合资公司合作伙伴, 和新加坡电信Innov8. 欲了解更多信息,请访问 www.kcentralinfo.com.

友情链接: 1 2 3 4 5 6 7 8 9 10