【51CTO.com原创稿件】WOT2016大数据峰会将于2016年11月25-26日在北京粤财JW万豪酒店召开,届时,数十位大数据领域一线专家、数据技术先行者将齐聚现场,在围绕机器学习、实时计算、系统架构、NoSQL技术实践等前沿技术话题展开深度交流和沟通探讨的同时,分享大数据领域最新实践和最热门的行业应用。
51CTO记者对即将参加大会演讲的AdMaster资深架构师刘喆先生行了专访,让我们先睹为快,探听AdMaster的Lambda架构实践方面的心得。
AdMaster简介:
AdMaster 精硕世纪科技(北京)有限公司是领先的营销数据技术公司,利用先进的大数据技术帮助品牌指导营销策略并预先量化营销效果。AdMaster架起了品牌、广告主与消费者之间的桥梁,是贯穿各行业和领域的数据枢纽。AdMaster实时日监测并分析来自数字电视、电脑、智能手机和平板电脑的线上广告曝光量数据高达50亿次。我们与国际、国内超百家媒体及上下游合作伙伴保持长期合作关系,保证了AdMaster作为数据枢纽的多方数据源对接和融合。
51CTO:在峰会现场你为何会选择《AdMaster的Lambda架构实践》这个演讲题目?
刘喆:总结近几年主要业务的一些需求, 以及我们对应的解决方案, 发现 Lambda 架构其实是非常适合业务需求的, 在系统稳定性/可扩展性/高效性等多方面满足了我们的需求. 我们也通过实践和趟坑, 完善了我们自己的Lambda 架构. 所以想给大家分享一下我们的实践, 跟大家交流.
51CTO:能给我们详细的介绍一下AdMaster 的 Lambda 架构技术的优势吗?
刘喆:Lambda 架构是一个大的思想和方案, 但是具体的落地和实践各有各的玩法, AdMaster 的 Lambda 架构在采用了开源界的 flume/kafka/spark/flink 等项目的同时, 加入了我们自己的改进和补充, 达到了查漏补缺和锦上添花的效果, 在稳定性/数据完整性/低时延/架构可扩展/业务可扩展 等等方面有我们自己的考虑和实践。
51CTO:有哪些优秀的AdMaster 的 Lambda 架构技术案例跟我们分享一下?
刘喆:一些案例包括:
1) Lambda 构架对高效准确的广告监测支持
2) Lambda 架构对高效丰富的广告投放支持
3) Lambda 架构对舆情分析的支持
51CTO:您如何看待WOT的?有哪些好的建议或者意见?
刘喆:WOT 我已经参加过几次, 感觉主办方非常用心, 真正地把前沿的技术带到会场, 让大家深入交流, 对于知识的传播起到了很好的促进作用, 参会者受益匪浅。
刘喆先生简介:
刘喆(Zhe Liu)先生2013年加入AdMaster,现任架构师,主要负责数据处理的全流程技术支持, 高性能和高可用的分布式架构设计, DSL 语言抽象, Hadoop/HBase/Storm/Spark等大数据平台优化。2010年硕士毕业后, 刘喆在百度就职, 负责当时全球规模最大的 hadoop 平台的运维开发工作. 2011年底加入人民搜索, 代理运维总监。近7 年的大学生活和近 5 年的工作经历中, 刘喆一直在追求简单直接,关注于数据挖掘/大数据/DSL/系统架构, 对分布式计算/分布式架构和程序语言情有独钟, 曾多次被51CTO/spark 峰会/into100峰会等邀请为嘉宾分享Hadoop/spark/开源软件等相关经验。
【51CTO原创稿件,合作站点转载请注明原文作者和出处为51CTO.com】
,