51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术24年11月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9063内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9063 条
如何解决分布式系统可管理性问题?
分布式系统是一个由很多进程组成的整体，这个整体中每个成员部分，都会具备一些状态，比如自己的负责模块，自己的负载情况，对某些数据的掌握等等。

2016-12-09 09:21:45

分布式系统大数据
大数据安全、隐私为市场分析关注点
“关于隐私的主要问题起因于数据环境的使用：采集来源于不同的环境局部画面的数据，根据时间和地点将它们放到一起，然后建立一个更加完整的人们和行为在特定时间段和地点的视图。

2016-12-09 09:13:06

大数据隐私安全
大数据思维的十大核心原理
大数据思维是客观存在，大数据思维是新的思维观。用大数据思维方式思考问题，解决问题是当下企业潮流。大数据思维开启了一次重大的时代转型。

2016-12-09 09:07:39

大数据思维核心
打造线上的大数据风控，我们发现了这三个坑
这三个坑是我回国以后需要解决的课题，从目前的情况来看，国内的Fintech行业前景还是非常乐观。中国的大数据风控不论在实用性还是开放性上，都要优于国外，企业也愿意投入更多的资金来促进技术的进步，这都为我们行业的发展提供了充足的动力。

2016-12-09 09:00:32

大数据风控金融
Yelp的实时流技术之四：流处理器PaaStorm
这个系列会深度讲解我们如何用“确保只有一次”的方式把MySQL数据库中的改动实时地以流的方式传输出去，我们如何自动跟踪表模式变化、如何处理和转换流，以及最终如何把这些数据存储到Redshift或Salesforce之类的数据仓库中去。

2016-12-08 14:41:59

流处理器PaaStormKafka
数据中心运维工程师必备技能
作为数据中心里的一名运维工程师，应该掌握哪些技能，才能在工作中游刃有余。要知道数据中心里有很多设备，而作为一名运维工程师不可能，也没有必要全部掌握，要懂得应该掌握哪些技能，一些基本命令和重要设备的操作一定要掌握，这些技能往往在关键时刻可以发挥重要作用。本文将说一说运维工程师需必备的技能。

2016-12-08 14:19:12

数据中心运维工程师
Yelp的实时流技术之三：不止是模式存储服务的Schematizer
当你的系统每天要实时从MySQL到Kafka发布几十亿条消息时，你会怎么管理这些数据的模式信息呢?

2016-12-08 14:02:25

存储服务Schematizer
意大利个人数据保护立法的经验
作为罗马文明重要的组成部分，罗马法向世人证明了古罗马的伟大，两千多年过去了，罗马法的精神仍世代流传。进入互联网时代，面对与日俱增的隐私侵犯和个人数据泄露的风险，意大利仍紧跟时代步伐，通过整合和修改原有法律，制定出一部体系完整的《个人数据保护法典》，再次树立了个人数据保护的立法典范。

2016-12-08 13:33:24

意大利数据保护大数据
驾好“三套车”，打造大数据产业的竞争力
当前，中国大数据产业尽管已初具规模，但尚未成熟，产业界也并未就发展方向达成共识。客观来看，国家层面的支持为大数据产业的发展注入了强劲动力，这无疑是一大利好。具体来看，发展策略需要从核心要素出发，在提升三大能力补齐“短板”的同时把握好未来发展的方向，从而真正打造出具有竞争力的大数据产业。

2016-12-08 13:29:51

大数据产业大数据
如何分析用户反馈数据? | 下
在《理解用户反馈最佳实践指南》的第一部分中，我们主要着眼于如何分析和理解那些对我们的产品有重要影响的反馈类型。一旦你决定了应该聚焦于哪些反馈以后，接下来，要如何针对用户的反馈制定公司的可执行方案?如何管理大量开放式的用户反馈，然后在制定产品路线时使用它?

2016-12-08 13:22:43

数据反馈大数据
如何更好的理解用户反馈？ | 上
及时收集有用的用户反馈是一个长期的过程。这就是我们为什么要将《如何更好的理解用户反馈》分成两部分的原因。在这篇文章中，你将聚焦于如何分析和理解对你的产品最重要的那些用户反馈类型。

2016-12-08 13:16:50

大数据用户反馈
数据中心的“漂绿七宗罪”
美国环境营销公司Terra Choice曾发布了调查报告“漂绿六宗罪”，揭露企业界的虚假环保宣传行径，指出不诚实，则永远不能提高环保水平。对于数据中心市场，同样也存在相当一部分关于绿色的虚假宣传，在这里称之为“漂绿七宗罪”。下面就来详细说说这七宗罪。

2016-12-08 13:12:36

数据中心绿色认证
IT部门不应忽略的12种数据
无论你们公司有多少数据或者你们的经理需要多少数据，你们很有可能错过了掩藏在数据之下的瑰宝。下面我们会分享12个案例，案例中讲述了什么数据是你可能忽视的，为什么它在很大程度上对资深IT人士和你们的企业来说很重要。

2016-12-08 13:06:52

大数据
大数据分析原地踏步 原来是分析工具面临信任问题
有时候大数据分析似乎总是在原地踏步，似乎数据信任的问题阻碍了数据分析的进一步应用。业务领导们理解新数据分析是必须经历的转型，但是他们不确定这种转变是否值得信赖。最近，来自咨询专业服务公司KPMG(毕马威会计事务所)的一份调查报告对这种进退两难的处境给出了一些看法。

2016-12-08 13:03:10

大数据数据分析
大数据成为证据的新标准：完整性 复合性 科学性
大数据并非严格意义上的证据，因为被万维网络记录下来的大数据是杂乱的，分散的，尚不具备作为证明案件事实的证据资格，只有在将相关数据进行客观完整采集的基础上，运用科学的数据处理技术进行连接、运算和分析，它们才能为证明案件事实提供有价值的分析结论，成为证据。

2016-12-08 09:03:07

大数据证据标准
2017年有望实现大数据的六大预言
在过去十多年里，先进的数据科技分析工具问世，已经使商业精在英数据中获得巨大的利益，对大多数人来讲他们只是触及了数据的表面，大数据正在以开天辟地的方式让企业获得巨大的潜能，到2017年有望实现六大预言。

2016-12-08 08:54:46

大数据预言物联网
大数据安全“脆弱性”凸显 防护成重要课题
随着数据发掘的不断深入和在各行业应用的不断推进，大数据安全的“脆弱性”逐渐凸显，国内外数据泄露事件频发，用户隐私受到极大挑战。

2016-12-08 08:35:30

大数据防护安全
「大数据」和「深度学习」有什么区别？
今天主要介绍「大数据」和「深度学习」之间的区别。

2016-12-07 19:55:33

大数据深度学习
云计算、大数据、人工智能，谁将开启下一个时代？
大数据、云计算、人工智能这三者不能分开来讲，三者是有着紧密联系的，互相联系，互相依托的。

2016-12-07 17:19:38

云计算大数据人工智能
大数据管道技术 推动Hadoop架构与开发模式的变革
快速数据分析和实时处理的兴起，可能会给大数据管道带来一定的变革，微服务架构正在融入Hadoop领域。

2016-12-07 17:12:57

大数据Hadoop
谷歌：如何应用数据分析来指导商业实践
我是做技术出身，不太喜欢重复造轮子，在对 Avinash Kaushik 这篇文章的大部分编译的基础上，也提出了我的一些个人看法和思考。限于篇幅原因，原文里的四个案例，这里只摘了 Airbnb 的例子，感兴趣的朋友可以在文末查看原文。

2016-12-07 15:40:42

谷歌数据分析Airbnb
大数据护航“舌尖上的安全
全国各地遍布着像海吉星这样的农产品加工、物流及销售基地。依靠大数据、物联网、云计算等新一代信息技术，农产品产业链上的生产、经营、流通、服务领域等各个环节都在信息技术的“监控”下，精确操作、全面记录、持续跟踪。

2016-12-07 15:25:55

大数据农产品安全
如何用KNIME进行情感分析 | 下
这一篇中，我们将使用N元语法(N-gram)，借助KNIME来探究如何选取词语特征，获得的模型能够实现更准确地分类。

2016-12-07 14:56:51

KNIME数据分析
如何使用KNIME进行情感分析 | 中
今天我们来聊一聊如何用KNIME构造一个情感分析模型，以便后期对相似的文本进行情感分析。

2016-12-07 14:45:25

KNIME情感分析数据分析
为您的数据中心环境选择最合适的机架配电装置的最佳方案
随着数据信息日益成为许多企业组织背后最为强大的驱动力，数据中心现在业已成为了企业业务成功运营的基础。在这种环境下，峰值期间的工作效率和可靠性无疑是数据中心的必需品;如果数据中心瘫痪，企业业务必将受到影响。因此，这些需求正在改变企业设计和运营数据中心的方式。

2016-12-07 14:31:56

数据中心机架配电装置PDU
用KNIME进行情感分析 | 上
本文案例展示了如何利用KNIME对社交媒体数据进行情感分析。

2016-12-07 14:23:48

KNIME数据分析情感分析
Spark架构在大数据环境的核心位置找到用武之地
Webtrends公司的IT团队在Apache Spark这款处理引擎还是一项学术研究项目的时候就已经开始使用它并沿用至今。但当Webtrends在2014年年中部署了一套基于Hadoop的大数据环境来对分析应用程序进行增强的时候，Spark架构便成了一个有限的角色：有关数据索引的聚合细节有助于用户发现相关信息。现在，一切都已改变，而且该公司正在花大力气学习Spark并作为其大数据平台升级版本的一部分。

2016-12-07 13:18:52

Spark架构大数据
机器学习性能改善备忘单：32个帮你做出更好预测模型的技巧和窍门
本备忘单的目的是为你提供一些提升机器学习性能的想法。要获得突破，你所需要的可能就是其中的一个。找到你要的那个，然后回来，再找下一个再提升。

2016-12-07 09:56:32

预测模型技巧
如何用Spark解决一些经典MapReduce问题？
本文将简单介绍几个经典hadoop的mr按理用spark实现，来让大家熟悉spark的开发。

2016-12-07 09:38:53

SparkMapReduce
中企通信与大地影院集团签订战略合作协议
中企网络通信技术有限公司近日宣布与电影产业标杆企业“大地影院集团”在北京签署合作协议，成为大地影院集团之ICT战略合作伙伴，并从咨询、设计、部署、运维等方面提供完整性的ICT管理解决方案。

2016-12-07 09:33:52

中企通信影院
中国大数据市场规模及应用前景研究报告
随着移动互联网、移动终端和数据传感器的出现，数据正以超出想象的速度快速增长。近几年，数据量已经从TB级别跃升到PB乃至ZB级别。2014年全球数据总量为6.2ZB，2015年全球数据总量达8.6ZB。目前全球数据的增长速度在每年40%左右，以此推算，到2020年，全球的数据总量将达到40ZB。

2016-12-07 09:28:56

大数据互联网大数据市场
用KNIME构建社会网络
要研究网络，先要明白什么是网络。网络由节点(node)以及节点之间的连线(也叫边，edge)构成。一个节点代表着一个行动者，或者说是一个实体，可以是一个人、一个组织、一个国家、一个商品、一个学科，等等。边是网络中两点之间的联系。

2016-12-07 09:27:11

KNIME大数据网络
如何借助GlusterFS构建存储池 译文
GlusterFS可存储网络上的数据，还可以用作云环境下的存储后端。

2016-12-07 09:26:27

GlusterFS存储池
专访崔崇彦：大数据的真正价值在于预测，而不是说明现状
2016年，大数据都经历了什么?未来的大数据能够做什么?今年的商业地产又发生了什么样的变化?在张家鹏商业地产公益学院上，小编专访了RET睿意德北京策略顾问部总经理崔崇彦，揭开大数据的这一年。

2016-12-07 09:15:16

大数据崔崇彦
你距离被Facebook认可的数据分析师，还差点什么?
如果你想更快速、高效地提升，也没有那么多时间和精力去不同行业里不断试错，通过现在蓬勃发展的在线教育来提升自己，也是不错的选择。有关数据分析的在线课程也很多，免费的、收费的、国内的、硅谷的都有。

2016-12-06 09:05:31

Facebook数据业务
数据主权会将数据中心绑定吗？
互联网是全球性的，这是一个令人头痛的国家税收和隐私制度。世界各国政府最近采取的行动导致了“数据主权”的概念，即数据被迫驻留在一个国家，或移动到那里以获得最佳的隐私规则。这一切都是因为数据中心的移动性，它可能开始限制移动性。全球服务提供商长期以来一直被指责通过移动来避免税收和其他负担，但这可能变得困难。

2016-12-05 14:11:58

数据主权数据中心
如何看待数据中心网络架构变化？
在不太遥远的过去，数据中心内的流量转发是简单的。一个IP地址将与另一个IP地址实现通讯。这些地址属于端点——裸金属主机或虚拟机与其他裸露的金属主机或虚拟机实现通讯。这些IP地址之间的路径被称为数据中心交换机，就像路由和桥接表中的入口。

2016-12-05 14:07:42

数据中心网络架构大数据
大数据安全防护应注重两大核心
移动互联、社交网络、电子商务等极大地拓展了互联网的边界和应用范围，各种数据正在迅速膨胀并变大，大数据应用随之迅猛发展。

2016-12-05 14:05:32

大数据安全防护
以Flink为例，消除流处理常见的六大谬见
我们在思考流处理问题上花了很多时间，更酷的是，我们也花了很多时间帮助其他人认识流处理，以及如何在他们的组织里应用流处理来解决数据问题。在这篇文章里，我们选出了其中的六个作为例子。因为我们对Apache Flink比较熟悉，所以我们会基于Flink来讲解这些例子。

2016-12-05 14:03:07

Flink大数据
Docker生态会重蹈Hadoop的覆辙吗?
2015年说是Docker之年不为过，Docker热度高涨，IT从业人员要是说自己不知道Docker都不好意说自己是做IT的。2016年开始容器管理、集群调度成为热点，K8s开始成为热点。但这一幕和2013年的Hadoop大数据何其相似，当年你要说自己不知道大数据，或是知道大数据不知道Hadoop，那必然招来鄙视的眼光。

2016-12-02 19:56:11

DockerHadoop大数据
我国企业大数据的发展与应用总览
近年，企业级大数据应用逐渐普及，消费者行为分析、精准营销、新业务新产品推广、广告推送、代言人选择、社交媒体、可视化、溢价收益、库存管理、信贷保险等相关应用不断丰富。伴随着一批致力于商业和企业应用服务的大数据初创企业迅速成长，大数据更广泛地应用到各领域企业中。

2016-12-02 19:42:34

大数据大数据产业
图说丨数据科学从业者，你值多少钱？
O'Reilly 日前发布了数据科学从业者薪酬报告(2016 Data Science Salary Survey)，分析了来自45个国家的近千份调查报告后，针对数据科学从业者使用的工具、薪酬待遇等问题进行了详细分析解读，并从调查结果中得到一些有趣的结论。

2016-12-02 19:34:26

数据科学大数据
干货|大数据Hadoop快速入门教程
Hadoop是一个由Apache基金会所开发的分布式系统集成架构，用户可以在不了解分布式底层细节情况下，开发分布式程序，充分利用集群的威力来进行高速运算与存储，具有可靠、高效、可伸缩的特点。

2016-12-02 19:19:35

大数据Hadoop
抛砖引玉：像数据科学家那样思考
像经济学家那样思考，是常常被人提起的。究其原因，是因为经济学在社会科学领域有一统天下的趋势，其研究范式被社会学，心理学，甚至历史性借鉴，经济学的思维方式，也可用到日常生活中，从而使得人们想变得想经济学家那样思考问题。类似的，数据科学这几年也是火的不能再火了，过不了几年，每家公司都会考虑增设Cheif AI office，那么如何像个数据科学家那样思考，也会成为热门话题的。

2016-12-02 19:14:16

数据科学大数据
链家网赵国贤：如何应对业务增长带来的架构搭建难题 原创
在WOT2016大数据技术峰会的行业应用实践专场，链家网大数据架构师赵国贤做了《地产数据的基石之大数据架构之路》的演讲，会后记者针对链家网大数据架构搭建中遇到的难题和应对方案等与他进行了详细沟通，以下是采访分享。

2016-12-02 16:54:52

架构大数据业务
健康医疗大数据领域的政策和法律问题
互联网技术与医疗健康产业的日益融合，空前扩大了医疗数据的规模，于是越来越多的企业开始关注并积极探索健康医疗大数据的深度挖据和应用。

2016-12-02 09:13:01

医疗大数据政策
Apache CarbonData的Update/Delete功能设计实现
CarbonData是由华为开发、开源并支持Apache Hadoop的列式存储文件格式，支持索引、压缩以及解编码等，其目的是为了实现同一份数据达到多种需求，而且能够实现更快的交互查询。目前该项目正处于Apache孵化过程中。

2016-12-02 09:03:20

Apache CarbUpdateDelete
AlphaGo的大数据等技术分析
我们的DarkForest和AlphaGo同样是用4搭建的系统。DarkForest较AlphaGo而言，在训练时加强了1，而少了2和3，然后以开源软件Pachi的缺省策略 (default policy)部分替代了2的功能。以下介绍下各部分。

2016-12-02 08:51:05

AlphaGo大数据技术
英美是如何利用大数据管理社会的？
大数据这个名词和概念越来越火爆，除了在互联网创业领域外，社会管理和民生领域相关应用也越来越频繁，比如深圳的大梅沙景区就采用了大数据安全监控，保障人流控制在合理安全范围内。英美等发达国家如何利用大数据来管理社会呢?

2016-12-02 08:36:24

利用大数据Hadoop
剖析大数据分析方法论的几种理论模型
做大数据分析的三大作用，主要是：现状分析、原因分析和预测分析。什么时候开展什么样的数据分析，需要根据我们的需求和目的来确定。

2016-12-01 19:10:42

大数据数据分析
上一页 1 ··· 131132133134135 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服