【51CTO.com原创稿件】2016年11月25-26日,由51CTO.com主办的WOT 2016大数据技术峰会在北京粤财JW万豪酒店隆重召开。自2012年以来,WOT品牌大会秉承“专注技术、服务技术人员”的理念已经成功举办十二届,不仅积累了大量的专家资源,更获得广大IT从业者和技术爱好者的认可和好评,已成为业界重要的技术分享及人脉拓展平台。
在WOT2016大数据技术峰会的实时计算主题专场,51CTO学院认证讲师,恩墨学院大数据培训产品总监孟硕做了《实时计算》的演讲,会后记者采访了他,他为大家介绍了大数据相关的知识。
孟硕 51CTO学院认证讲师,恩墨学院大数据培训产品总监,前甲骨文Oracle BigData 一体机咨询顾问。擅长利用MDB DTrace 剖析系统原理,解决系统数据库与操作系统兼容性的诸多问题。在 Oracle 解决方案中心任职期间,接触大量一线大数据应用案例,同时取得国际商业大数据领导公司 Cloudera 的 ACTP 认证讲师资质。 同时还获得:Oracle OCM 10g、Cloudera Certified Administrator for Apache Hadoop (CCAH)
孟硕老师本次大会上的演讲主题主要是流式计算,是大数据整个知识体系里面的一个位置,演讲主要对比他们的优缺点,对在生产过程中采用什么样的架构给出了建议。
大数据时的数据分析
大数据分析涉及很多方面,如果要分析数据的话,包括从前端数据采集,到中间处理,到后面机器学习的部分。机器学习是最核心,也是最有意思的部分。如何快速有效去做?需要做到的是数据集成,可以针对数据从前端到***都有一个非常深刻了解。在此之前,在现代大数据平台跟传统数据分析中间是有一个鸿沟,很多现有的数据分析师,包括数据科学家不了解现在企业数据来源,应该学习整个架构而不是学习整个机器部分,现在很多企业整个的精力致力于这两个鸿沟,把整个全产业链的知识体系都明确铺开。
中国传统企业数据的安全保障
其实中国的大数据主要的数据是绑在政府的手里,迟迟不敢放开,就是数据安全性的问题,现在目前有很多解决方案,比如说用kerbero,但是还没有形成一个完整的体系,有时候技术上是成熟的,但是相对应的这种法律法规还没有建立起来的时候,也是对大数据安全是个挑战。
云计算与大数据
现在大数据的变化是于云计算本身有关系的,现在主流大数据的商业成品,都是支持在云环境下部署,比如说商业大数据龙头企业clouder,它现在出了一个产品,简化企业在亚马逊平台,还有其他云平台甚至微软的azur这种云平台上面的部署,把部署过程做一个简化。所以说未来云平台对大数据的影响是,会有越来越的公司把自己数据平台放在云上。
双学院教大数据
恩墨学院和51CTO学院合作推出一个可能是唯一一个覆盖整个大数据全软件链知识体系的一套课程,恩墨学院提供了大量商用数据相当于在Linux里面的红帽,恩墨学院同样借鉴了了课程设计体系结合学院受众的特点,量身订作了整套的培训课程。
【51CTO原创稿件,合作站点转载请注明原文作者和出处为51CTO.com】