WOT讲师刘喆:探听AdMaster的Lambda架构实践

原创
新闻
Lambda 架构是一个大的思想和方案, 但是具体的落地和实践各有各的玩法, AdMaster 的 Lambda 架构在采用了开源界的 flume/kafka/spark/flink 等项目的同时, 加入了我们自己的改进和补充, 达到了查漏补缺和锦上添花的效果, 在稳定性/数据完整性/低时延/架构可扩展/业务可扩展 等等方面有我们自己的考虑和实践。

   【51CTO.com原创稿件】WOT2016大数据峰会将于2016年11月25-26日在北京粤财JW万豪酒店召开,届时,数十位大数据领域一线专家、数据技术先行者将齐聚现场,在围绕机器学习、实时计算、系统架构、NoSQL技术实践等前沿技术话题展开深度交流和沟通探讨的同时,分享大数据领域***实践和最热门的行业应用。

  51CTO记者对即将参加大会演讲的AdMaster资深架构师刘喆先生行了专访,让我们先睹为快,探听AdMaster的Lambda架构实践方面的心得。

  刘喆先生简介:

  刘喆(Zhe Liu)先生2013年加入AdMaster,现任架构师,主要负责数据处理的全流程技术支持, 高性能和高可用的分布式架构设计, DSL 语言抽象, Hadoop/HBase/Storm/Spark等大数据平台优化。2010年硕士毕业后, 刘喆在百度就职, 负责当时全球规模***的 hadoop 平台的运维开发工作. 2011年底加入人民搜索, 代理运维总监。近7 年的大学生活和近 5 年的工作经历中, 刘喆一直在追求简单直接,关注于数据挖掘/大数据/DSL/系统架构, 对分布式计算/分布式架构和程序语言情有独钟, 曾多次被51CTO/spark 峰会/into100峰会等邀请为嘉宾分享Hadoop/spark/开源软件等相关经验。

  AdMaster简介:

  AdMaster 精硕世纪科技(北京)有限公司是领先的营销数据技术公司,利用先进的大数据技术帮助品牌指导营销策略并预先量化营销效果。AdMaster架起了品牌、广告主与消费者之间的桥梁,是贯穿各行业和领域的数据枢纽。AdMaster实时日监测并分析来自数字电视、电脑、智能手机和平板电脑的线上广告曝光量数据高达50亿次。我们与国际、国内超百家媒体及上下游合作伙伴保持长期合作关系,保证了AdMaster作为数据枢纽的多方数据源对接和融合。

  51CTO:在峰会现场你为何会选择《AdMaster的Lambda架构实践》这个演讲题目?

  刘喆:总结近几年主要业务的一些需求, 以及我们对应的解决方案, 发现 Lambda 架构其实是非常适合业务需求的, 在系统稳定性/可扩展性/高效性等多方面满足了我们的需求. 我们也通过实践和趟坑, 完善了我们自己的Lambda 架构. 所以想给大家分享一下我们的实践, 跟大家交流.

  51CTO:能给我们详细的介绍一下AdMaster 的 Lambda 架构技术的优势吗?

  刘喆:Lambda 架构是一个大的思想和方案, 但是具体的落地和实践各有各的玩法, AdMaster 的 Lambda 架构在采用了开源界的 flume/kafka/spark/flink 等项目的同时, 加入了我们自己的改进和补充, 达到了查漏补缺和锦上添花的效果, 在稳定性/数据完整性/低时延/架构可扩展/业务可扩展 等等方面有我们自己的考虑和实践。

  51CTO:有哪些优秀的AdMaster 的 Lambda 架构技术案例跟我们分享一下?

  刘喆:一些案例包括:

  1) Lambda 构架对高效准确的广告监测支持

  2) Lambda 架构对高效丰富的广告投放支持

  3) Lambda 架构对舆情分析的支持

  51CTO:您如何看待WOT的?有哪些好的建议或者意见?

  刘喆:WOT 我已经参加过几次, 感觉主办方非常用心, 真正地把前沿的技术带到会场, 让大家深入交流, 对于知识的传播起到了很好的促进作用, 参会者受益匪浅。

【51CTO原创稿件,合作站点转载请注明原文作者和出处为51CTO.com】

51CTO主办的高端技术峰会【WOT2016“大数据技术峰会】将于11月25日-26日在北京粤财JW万豪酒店盛大揭幕,40余位业内重量级嘉宾汇聚,解析大数据技术与行业应用的实践结合。福利大放送,主办方将邀请更多讲师来到“WOT讲师专访间”,深度解析技术干货。

WOT2016更多访谈
责任编辑:张诚 来源: 51CTO
相关推荐

2016-11-25 23:04:00

AdMaster架构实践

2015-10-10 17:43:01

360刘鹏大数据

2015-11-11 09:49:27

wot舒服分析

2015-11-13 10:35:05

大数据医院信息化WOT

2015-11-24 10:22:08

wot360

2015-03-06 09:52:13

2015WOT峰会开源运维工具研发与实践

2016-11-09 15:49:28

大数据金融WOT2016

2015-11-25 10:33:47

2014-11-03 13:24:31

2014WOT运维

2016-08-11 10:09:01

Wrtnode罗未WOT大会

2018-01-08 09:16:26

精硕科技云计算标准和应用大会

2014-10-29 10:49:36

2014WOT运维

2015-03-06 11:18:44

2014-05-20 10:25:16

刘宇WOT架构师WOT2014

2016-11-01 09:49:12

甲骨文

2015-11-26 13:50:09

2016-07-29 13:33:21

2019-02-22 08:00:00

Lambda架构IOTA

2016-05-28 19:32:49

51CTO网+数据挖掘

2015-03-11 15:08:25

2015WOT峰会应用性能监控与管理
点赞
收藏

51CTO技术栈公众号