你知道世界一天产生多少数据量吗? 你知道从谷歌的搜寻关键字,如何预测流感疫情的蔓延? 你知道为什么登入购物网站,发现陈列的商品都是最想买的东西?电脑知道要回答这些问题,关键就在于大数据 (Big Data)!
随着资讯越来越发达,数据爆发增长、零散数据、即时数据分析、社交舆情收集、垃圾数据,只要讲到有关Big Data 的报导,几乎都会涉及很多科技名词,很多人都产生一种印象,就是 Big Data 是很高深的科技,而且投资很大、很难用。
身处大数据时代,全球企业拼命从各式各样的管道搜集数据,想从中转换成有用的资讯,大数据及Hadoop技术一跃成为现今IT领域最炙手可热的话题,Big Data发展十分迅速,潜力极大,彻底颠覆整个产业的面貌。
面对不断扩张的惊人数据量,Big Data的储存、管理、处理、搜寻、分析与智能应用等处理数据的能力也将面临新的挑战,而处理数据的技术将迫切需要可动态与弹性等特点,以支援大量数据处理的计算模式。
为了跟上时代趋势,想从事大数据行业的朋友,大家需要了解Big Data的平台建置与实务应用,学习安装及操作Hadoop的基本概念、利用Hadoop分散式档案系统(HDFS)、快速建构云端运算的执行环境和服务以及云端数据的Big Data处理与应用。