51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术25年5月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9074内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9074 条
Spark 和 Hadoop 是朋友不是敌人
6月15日，IBM 宣布计划大规模投资 Spark 相关技术，此项声明会促使越来越多的工程师学习 Spark 技术，并且大量的企业也会采用 Spark 技术。

2015-07-15 10:11:31

SparkHadoop
大数据分析到底需要多少种工具？
JMLR杂志上最近有一篇论文，作者比较了179种不同的分类学习方法（分类学习算法）在121个数据集上的性能，发现Random Forest（随机森林）和SVM（支持向量机）分类准确率最高，在大多数情况下超过其他方法。本文针对“大数据分析到底需要多少种工具？

2015-07-08 15:07:23

大数据分析多少种工具
将Hadoop作为云托管服务的优劣势分析 译文
Hadoop 之所以广受欢迎，就是因为它为使用大众化硬件处理大数据提供了一种几乎没有限制的环境。添加节点是个简单的过程，对这个框架没有任何负面影响。虽然Hadoop统一了分布式计算，但是配备和管理另外的数据中心、更不用说与远程员工打交道，增添了复杂性和成本。结果就是，Hadoop集群可能显得过于孤立。

2015-07-08 09:19:56

HaaSHadoop即服务云端Hadoop
Spark的快难道是以丧失正确性为代价的？
Spark最著名的一篇论文是：《Spark: Cluster Computing with Working Sets》。当你读它的时候你需要明白：文中代码不保证计算结果是正确的。具体来说，它的Logistic Regression的代码在map阶段用到了accumulator。下面解释为什么这么做是错误的。

2015-07-06 14:54:19

Spark计算正确性Hadoop
毕业季特刊：剥开大数据的层层面纱 原创
前几天和长辈闲聊之下，“大数据”，竟然也从老人家嘴里蹦出来。真是 duang的一声，把我吓了一跳。大数据，真不再是只可远观，高大上的主了。现在正是毕业季节，应届生都在都在东奔西走的找工作，如果你恰巧你找的工作是大数据方面的，希望这个小版块能帮到你。

2015-07-03 13:27:02

大数据大数据分析
大数据虽然很热 但也需要冷处理
相关的体系和政策是要形成，但是现阶段的大数据还是处于企业单独进行的程度，如果可以形成统一的发展体系，也不乏是一种更好的方式。

2015-07-03 10:42:28

大数据冷处理
超级计算机，解锁大数据能量的利器 译文
在今天的文章中，我们将从六个角度来探讨为什么企业、甚至是初创企业正着手运用超级计算资源，而IT组织又能够怎样通过这一强大助力满足大数据与业务分析需求。

2015-07-02 09:47:36

超级计算机大数据
怎样才能持续聘到优秀的数据人才？
数据人才们可以处理不确定性。不管我们打交道的数据有多“大”，它含有有限个有偏的潜在样本。我们的模型在太简单以至于无实际意义和太复杂以至于无 法置信这两种极端情况间平衡选择。为了能找到控制数据噪声的方法，我们不断尝试模拟、测试验证。

2015-07-01 16:11:30

数据人才数据
基于Hadoop MapReduce模型的数据分析平台研究设计
并行程序设计方法中最重要的一种结构就是主从结构，而Hadoop则属于该架构。本分主要从以下两个方面来介绍基于Hadoop MapReduce模型的数据分析平台研究设计：分别是Hadoop MapReduce与Hive技术研究、数据分析平台框架设计与环境配置。

2015-07-01 13:51:12

HadoopMapReduce数据分析
前方高能“梗”很多，看那些大数据的猪在跑
最近几年来，市面上有不少关于大数据的宣传， 凡有饮水处，都能听到 “big data“， ”data driven decision making” 等等高大上的词汇。我在中关村街头看见有人在溜大数据的猪，也吃过大数据的猪肉，饱食终日，也想分享一些零碎的感想。

2015-06-29 13:40:12

大数据猪在跑
大数据的最大价值: 大数据+物体=智能
人与物体，是地球的两大类，人是地球上最高级的动物，物体（动物，植物，生物，微生物，人造物体）不能制造，人拥有智慧，人主宰了这个地球；

2015-06-29 13:38:31

大数据大价值
Teradata Loom显著提升数据湖可管理性和安全性
为防止用户无法访问并治理数据湖，全球大数据分析和营销应用服务供应商Teradata天睿公司宣布，推出数据湖管理解决方案Teradata Loom® 2.5。Teradata Loom帮助更多用户更轻松地查找、访问并分析数据湖中的数据，并可帮助客户获得全新商业洞察力，和用户现有分析生态系统高效整合，带来更高的工作效率。

2015-06-29 10:11:42

Teradata数据湖
顶级分析师炼成记：若有志成为大佬须做好基本面研究
几 年来，一直在思考一个问题，分析师如何更好地发挥自己的价值。作为一个商业机构的研究团队，我们一方面要为公司带来价值，这是最基本的职业道德，另一方面 是让客户尽量盈利，这是最基本的商业伦理。不管我们能否做到做好，但是至少要尽最大的努力。我们也一直在为公司和客户的双赢而努力。

2015-06-25 13:14:20

顶级分析师大佬数据
怎样成为一个数据科学家:针对大学毕业生的指导
刚毕业的大学生们，恭喜你们！欢迎成为劳动者的一员。在你所有可能申请的工作中，“数据科学家”这个风骚无比的职位也许最难得到的一个，同时也许是 最具有潜在丰厚回报的一个。但是别害怕：Datanami在这里以一个实际数据科学家从业者的身份给你一些建议，告诉你怎样成为他们中的一员。

2015-06-25 13:11:05

数据大学毕业生
大数据工具指南：从选择到应用
通过部署和使用大数据分析工具，分析流程可以帮助公司提高运营效率，产生新的利润，获得竞争优势。企业可选择的数据分析应用程序有很多。比如描述性分析善于描述已发生的事情，揭示因果关系。描述性分析主要输出查询、报表和历史数据可视化。

2015-06-25 13:06:48

大数据从选择到应用
如何用大数据看风水？以星巴克和海底捞的选址为例
有人问小度，你们整天说大数据大数据的，它到底有啥用啊？今天就给大家用三分钟讲讲看看如何用大数据来看“风水”！

2015-06-25 13:01:28

大数据星巴克海底捞
你的老婆是怎么算出来的？揭秘佳缘用户推荐系统
总结、温习，这两点让人成长。而不是你走得有多快！这句话我写了半年了，这篇文章算是此话付诸实践的开端吧。

2015-06-25 10:57:15

推荐系统老婆算出来
破解迷雾：关于大数据与Hadoop的九大误区 译文
这些毫无根据的印象涉及所需技能储备、技术方案类型以及技术匹配方式等多个层面，盲目偏信只会将大家引入歧途。

2015-06-23 10:04:06

大数据Hadoop误区
三个理由告诉你为什么需要在云端运行Spark 译文
Spark的发展势头正猛，可是对主流用户们来说还是太难了。云外加可视化也许有所帮助。

2015-06-23 09:10:04

Spark主机托管云平台
面对大数据，你能挖掘怎样的未来？
大数据的用途和形式越来越多，数据分析师在一个公司中的作用也越来越重。积累分析数据固然重要，但目前更为紧迫的问题是:可以从大数据里挖掘到多少可被企业利用的价值?

2015-06-19 15:33:22

大数据挖掘未来
分析：大数据如何催化电子商务企业
在线零售商、创业企业和投资人可以抓住新的市场机遇，找到合适的方式满足日益增长的亚洲在线客户了。

2015-06-18 06:02:16

大数据催化电子商务企业
大数据背后的事儿
本文作者比尔·弗兰克斯是Teradata的首席分析官，同时也是international Institute for Analytics的教员。他表达了有关大数据空间及其分析的发展趋势的见解，著有The Big Data Tidal Wave，并在最近出版了他的第二本书The Analytics Revolution。

2015-06-18 05:55:05

大数据大数据背后的事
星环大数据助银行数据仓库全面升级
我国银行的IT系统高度依赖“IOE”(以IBM为代表的小型机，以Oracle为代表的数据库软件、以EMC为代表的高端存储)等国外厂商。39号文的发布让大家认为银行业的信息技术立刻就要掀起国产化的大浪，但是今年四月，银监会宣布了暂缓39号文新规的决定。这个决定并不出乎意料。

2015-06-17 19:54:10

星环大数据银行
大数据帮填高考志愿靠谱吗？
大数据能帮助企业预测商品销量，能帮助电影预测票房，还能辅助高考生填报志愿？昨天，全国首个基于真实就业前景数据的高考志愿填报大数据平台“完美志愿”在京上线，依托4000万名大学毕业生的真实就业数据来为考生家庭提供决策参考。

2015-06-17 14:44:36

大数据填高考志愿
想学大数据？10条激励人心的数据科学家名言
几年前，哈佛商业评论说数据科学家的是“二十一世纪最性感的工作”。但你知道做一个数据科学家意味着什么吗？来，我们先看看这些数据科学专家的名言。

2015-06-17 14:41:27

大数据数据科学家名言
大数据分析软件包含哪些技术？
所谓大数据不仅体现在数量上的庞大，还有涉及到的方面比较广泛，以及计算过程比较的庞大而高效等，大数据分析能够从海量的数据中提取出最有效的信息，在企业的营销中发挥关键性的作用，可以说谁能够更好的利用大数据分析就能够在竞争中处于更加有利的位置，那么大数据分析都包含了哪些技术呢?

2015-06-17 14:39:23

大数据大数据分析
解析Hadoop 的集群管理与安全机制
当前大一点的公司都采用了共享Hadoop集群的模式，这种模式可以减小维护成本，且避免数据过度冗余，增加硬件成本。共享集群类似于云计算或者云存储，面临的一个最大问题是安全。本文就对Hadoop 的集群管理与安全机制进行讲解。

2015-06-17 11:27:47

Hadoop集群管理安全机制
助人就是助己：IBM宣布大规模资助开源大数据项目Spark
本周一，IBM宣布将对开源实时大数据分析项目Apache Spark进行大规模资助，蓝色巨人宣称，其资助的力度之大相当于每年数亿美元的投入。

2015-06-16 11:09:44

IBM大数据开源
开源大数据查询分析引擎现状
此文是与我的《基于大数据分析的安全管理平台技术研究及应用》同期发表在内刊上的我的同事们的作品，转载于此。这些基础性的研究和测试对比分析，对于我们的BDSA技术路线选定大有帮助。

2015-06-15 12:58:39

大数据大数据查询
Hadoop的一个变长long编码剖析
Hadoop对于long、int （化成long进行编码）的编码设计了自己的一套编码方式，这是一个zero-compressed encoded的变长编码方式，有利于大大压缩冗余数据。

2015-06-15 12:30:10

Hadooplong编码剖析
八款卓越开源工具帮你搞定数据可视化难题 译文
数据可视化是指将表格或者空间数据转化为人类友好且直观可视形式的处理机制。目前市面上的多款开源工具能够帮助大家创建出实用且信息丰富的图形成果。在今天的文章中，我们将一同了解其中八种开源数据可视化工具。

2015-06-12 10:30:44

数据可视化开源工具
HBase在腾讯大数据的应用实践
随着腾讯产品与技术的发展，几乎任何一个与用户相关的在线业务的数据量都在亿级别，每日系统调用次数从亿到百亿，对海量数据的高效插入和快速读取变 得越来越重要。而传统关系型数据库模式固定、强调参照完整性、数据的逻辑与物理形式相对独立等，比较适用于中小规模的数据，但对于数据的规模和并发读写方 面进行大规模扩展时，RDBMS性能会大大降低，分布式更为困难。

2015-06-11 10:09:04

大数据HBase
岂止于大：大数据这个词已经过时了
如今你随便翻翻书报杂志，都能看到和大数据相关的消息。每个人都在煞有介事地讨论着大数据，确实我们有很多好理由去关注大数据。事实上，大数据使用过程起来并不复杂，大概如下：数据经过处理变成可用信息，信息经过分析研究成为人类知识的一部分，而这些知识会让人们变得更具智慧。

2015-06-09 15:03:38

大数据岂止于大
大数据火了，对运营商意味着什么？
大数据火了？对通信业特别是运营商意味着什么？大数据的作用，看似云里雾里，其实可抓可拿。

2015-06-09 14:54:12

大数据运营商
可视化告诉你,大数据究竟是什么?
在谷歌图片搜索有关“大数据”，会出现很多个由三维“0”和“1”组成的图片;有一些解释性的信息图表;甚至出现“黑客帝国”的界面。在人类能够理解的范围内，大数据究竟是什么样子呢?

2015-06-09 14:49:38

大数据可视化
Hadoop RPC远程过程调用源码解析及实例
RPC(Remote Procedure Call）远程过程调用，它允许一台计算机程序远程调用另外一台计算机的子程序，而不用去关心底层的网络通信细节，对我们来说是透明的。经常用于分布式网络通信中。

2015-06-09 13:31:29

Hadoop RPC远源码解析
大数据开放面对的瓶颈究竟是什么？
大数据无影无形却又无所不在,这个听起来冰冷的词汇,如今已经被商机包围。你上网搜索的关键词、你网上购物的记录,你在社交平台分享的消息,你去超市买口香糖的频次,甚至你在八达岭高速上拨出的一个电话,可能都极具“价值”,成为别人洽谈桌上的筹码。

2015-06-04 10:26:50

大数据瓶颈
互联网和大数据将彻底改变制造业
时代是让自己更加强大，DT(数据技术)时代是让别人更加强大;IT时代是通过对昨天信息的分析掌控未来，是控制未来，而DT时代是去创造未来。未来制造业要的不是石油，未来制造业最大的能源是数据。

2015-06-04 10:21:05

大数据改变制造业
大数据行业5个职位方向指南
大数据已不再是新词，企业也越来越需要大数据高端人才。这给想要从事大数据方面工作的人员提供了难得的职业机遇。那么在大数据行业，都有什么职位可以选择呢？来看看大数据行业的5个职位方向指南吧！

2015-06-03 14:54:19

大数据大数据行业
大数据为何会冲击传统媒体服务模式
大家都知道大数据对于媒体的杀伤力是巨大的，这其中包含传统媒体（例如报纸、电视）也包含网络媒体（例如新闻门户）。可是大数据为何能够冲击传统媒体呢？

2015-06-03 14:45:06

大数据媒体服务模式
数据挖掘：大数据发展的核心驱动力
近年来，随着“大数据成为热门词汇，金融业在这一领域不断进行研究和探索。就金融业和大数据相关问题，本报记者近日专访中国民生银行发展规划资深 专家王彦博。王彦博认为，数据挖掘是大数据发展的核心驱动力，金融业依托大数据东风，通过有效运用数据挖掘，能够更好地识别客户和服务客户，实现与客户的 互利共赢。

2015-06-03 14:40:04

大数据数据挖掘
大数据时代自学考试数据管理
自学考试是我国高等教育的重要组成部分。随着大数据时代的到来，高等教育自学考试要向更高层次发展，就必须积极引进网络和多媒体技术，实现大量数据的采集、统计、计算、分析等方面的工作，实现高效、规范、科学的管理流程，推动自学考试改革创新、持续健康地发展。

2015-06-03 11:06:01

大数据考试数据管理
为什么贵州成了大数据时代的香饽饽？
一个内陆省份为什么忽然成了互联网+时代的香饽饽，这个不仔细想，还真难以理解。 我是不相信纯粹的市场驱动力的。这么一个大的国家，某个省份忽然在新的时代声量那么大，一定有一种塑造改革地标的用意。

2015-06-02 14:07:21

大数据时代贵州
传统生意与产品，终将被大数据摧毁？
预测未来最好的方法，就是去创造未来。

2015-06-01 16:01:21

大数据生意与产品
你想知道的关于Hadoop数据资源池的一切
随着Hadoop数据资源池的概念进入主流IT，越来越多的企业开始试水Hadoop。但很多只是将一部分数据池化，还没有开发出成熟的Hadoop环境。

2015-05-29 11:43:57

Hadoop数据资源池
浅谈如何才能快速成为数据分析师
我小时候的理想是将来做一名数学家，可惜长大了发现自己天赋不够，理想渐行渐远，于是开始考虑现实，开始做一些人生规划，我一直在思考将来从事何种职业，专注什么样的领域，重新定义着自己的职业理想。我现在的职业理想，比较简单，就是做一名数据分析师。

2015-05-29 10:24:32

数据分析师成为数据分析师
大数据介入天文学：未来的宇宙探索拥有无限可能
5月27日消息，据国外媒体报道，海量数据正改变人类观察宇宙的方式。人们一直认为天文学就是一门观测星空的科学，但如今各种来源提供的无尽信息产生了一种分析太空的新途径。

2015-05-27 14:37:20

大数据天文学
如何基于Docker快速搭建多节点Hadoop集群
Docker最核心的特性之一，就是能够将任何应用包括Hadoop打包到Docker镜像中。这篇教程介绍了利用Docker在单机上快速搭建多节点 Hadoop集群的详细步骤。作者在发现目前的Hadoop on Docker项目所存在的问题之后，开发了接近最小化的Hadoop镜像，并且支持快速搭建任意节点数的Hadoop集群。

2015-05-27 10:29:41

DockerHadoopHadoop集群
利用大数据和分析来发展业务，您准备好了吗？
许多企业已经发现，他们的内部数据访问和整合系统面临基于云的信息和大数据所带来的新挑战。如今的企业通常使用多个数据管理平台来完成内部分析和运营工作。由于平台增加和数据分散在不同的地理位置，许多企业发现数据虚拟化对其成功至关重要。

2015-05-26 10:30:20

大数据分析来发展业务
浅析：大数据分析在电商平台的应用
近30年来，随着网络技术的日益发展，互联网式的经营模式已经被越来越多的商家和客户所青睐，电商平台在各行各业都得到了迅猛发展，并且数量和规模在不断增长和扩大。同样钢铁电商也 是如此，越来越多的钢材生产企业、大型贸易商开始重视并已将大量资本注入发展钢铁电商

2015-05-26 10:27:17

大数据分析电商平台应用
上一页 1 ··· 159160161162163 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服