【51CTO.com原创稿件】Gartner最新发布的2016年度技术生命周期曲线研究指出,大数据不再是2016年“新兴的”技术,而区块链、智能数字挖掘、机器学习成为第一次进入该曲线的新兴技术,存在承继关系的它们正慢慢的融入到我们的工作和生活中,带来更多便利和快捷。相信未来随着感知智能机器时代的来临、透明的身临其境的体验优化以及平台革命的发展,大数据将发挥出它真正的价值,并为各类组织带来连接新商业生态系统平台的新机遇。
11月26日,WOT2016大数据技术峰会的一线专家、数据技术先行者与热情的IT技术人如约会面,共同探讨大数据领域的九大前沿技术话题。下面,我们将向您重点介绍算法与模型、物联网、机器学习、区块链、实时计算、系统架构、NoSQL等领域具体揭秘了哪些技术难点,并分享了哪些最新的技术实践和热门的行业应用。干货多多,现在带大家一一回顾!
算法与模型
大数据分析与挖掘技术发展如火如荼,各种大数据的新算法被开发研究出来。但要真正建立起一套有指导性的数据挖掘方法模型,应该遵从哪些步骤呢?
蘑菇街图像视频算法负责人张洪明(花名:民达)主要介绍人脸技术(包括人脸检测、特征点跟踪等)在电商直播中的应用实践,并重点解析了在移动手机端如何实时运行人脸技术算法的难点。乐视云高级开发工程师鲁宾宾讲解实时计算平台服务化的演进,如何通过简单的配置,零代码开发实现接入实时计算平台。小米公司研发总监欧阳辰针对小米程序化广告交易平台(MAX)架构实践过程中面对的技术问题,给出相应的解决方案。
物联网
随着互联网的不断发展,工程师通过支付信息、生物和社会图形数据,可以精准地了解并掌握用户身份的演变。本专场将阐述物联网如何通过用户核心的身份,来真正改变我们的日常生活。
树根互联技术有限公司副总经理王晓峰详解了如何帮助客户快速、低成本实现现有装备或设备的联网、监控?如何帮助客户基于机器的数据进行研发改进、运营优化、故障预测及模式创新?福建星瑞格软件有限公司高级技术顾问杨俞平介绍了非常适合海量数据在物联网分析应用的时序大数据解决方案。该方案通过使用特殊的存储方式,使得时序大数据可以高效存储和快速处理海量时序大数据,是解决海量数据处理的一项重要技术。
机器学习
数据爆炸时代,赋予机器以智能,依靠计算机来理解和使用庞杂的数据变得越来越重要。机器学习算法众多,在本专场中,百度大数据平台架构师侯珏介绍了百度机器学习开放平台,让大家可以直观了解这一平台所提供的多种算法和解决方案的重要价值。百分点研发副总监黄伟分享了如何显著提升文本情感分析实际效果的实战经验。猎聘网首席数据官单艺从实践出发,尝试对高效机器学习系统的基本设计原则和一些常用的设计模式进行归纳和总结。京东展示广告负责人郭文涛为大家展示了深度学习在工业界推荐系统中获得成功应用的深度模型。星环科技算法工程师于政讲述了面向金融领域的基于spark分布式架构的自然语言处理与文本分析技术。
区块链
今天,很多人还没弄懂大数据,区块链又来了。那么,区块链是什么,它与大数据究竟有着怎样的关系?
网录科技CEO吕旭军讲解了区块链作为一种去中心的分布式账本,在资产交易流通领域有很好的应用前景,旨在解决数字信息时代的信任问题。秘猿科技CEO谢晗剑简述了区块链技术的历史并尝试探讨区块链技术的未来。
实时计算
从海量数据中及时获取价值,这正是大数据实时计算越来越流行的原因。多分布式计算系统都可以实时或接近实时地处理大数据流,你知道该如何选择吗?
来自一点资讯大数据平台研发总监田超介绍了一点资讯兴趣引擎背后的技术,如何实时的获取和发现海量用户精准兴趣。易观CTO郭炜分享了如何从大数据架构、应用方面展开企业大数据的实时分析之路。百度网页搜索基础架构团队技术负责人颜世光解析了百度万亿量级实时数据库系统Tera如何解决资源消耗巨大、每周全量处理和时延太长的现实问题,实现分钟级的链接发现、网页抓取和索引筛选。
系统架构
提到大数据分析平台,不得不说Hadoop系统,Hadoop到现在也超过10年的历史了,很多东西发生了变化。在Hadoop之外,你了解这些大数据架构选型补充吗?
在本专场中,EasyHadoop创始人向磊分享了如何帮助开发者构建自己的可视化大数据查询平台。目前负责国美在线大数据平台整体建设的路加讲述了OLAP利器Apache Kylin在国美在线的应用和宝贵经验。腾讯高级工程师周东祥解密腾讯数据应用技术架构,探讨腾讯游戏大数据和一般的互联网大数据采集的共性与区别。
NoSQL技术实践
现有的关系型数据库已经无法在硬件上满足数据疯狂增长的需要,“非关系型数据库”应运而生。众多NoSQL产品各有各的适用场景,你是否在选型时一片茫然?
甲骨文中国有限公司高级技术顾问赵强分享了Redis高性能缓存及持久化,即Redis如何针对Memcached这类Key-Value存储不足的问题。巨杉数据库联合创始人&CTO王涛探讨在金融、政府等企业级的大数据应用下,NoSQL数据库如何加速企业级大数据。PingCAP CTO黄东旭阐述NewSQL如何更好的解决单机关系型数据库的扩展性问题,设计哲学以及背后的一些工具分享。58到家数据库高级经理李凌分享了58到家的NoSQL实践,针对创业型公司NoSQL数据库应用及运维实践,主要分享58在公有云环境的一些使用经验和不同阶段的优化。
相信本次WOT大数据峰会将给技术人员带来实际的工作借鉴和帮助。如果您是开发者和运维工程师,敬请关注2017年4月份在北京举行的全球架构与运维技术峰会,我们将继续邀请有实战经验的行业大牛分享最有价值的干货,力求为大家解决工作中各个环节所遇到的技术难题。也希望更多技术人关注51CTO, 关注WOT!
【51CTO原创稿件,合作站点转载请注明原文作者和出处为51CTO.com】