51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术25年5月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9088内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9088 条
商业银行如何玩转大数据？
本文以商业银行的视角，从大数据的核心思想、数据特点、技术要领、实施要点四个方面切入，以六组问答的形式对商业银行大数据相关的思想、概念、方法、对策等进行辨析和讨论。

2017-01-04 10:45:26

大数据商业银行应用
3年360亿！北京治霾效果怎么样？大数据给出了答案
2016年12月16日至21日，我国北方一场“最浓重”的雾霾，让人们意识到，最近三年治霾“战役”中的敌人比我们想象的要强大很多。从2014年以来，首都的空气质量到底是如何变化的，优良天气和重污染天气到底是多了还是少了。对此，新华社记者结合大数据进行了分析。

2017-01-04 10:37:08

大数据北京治霾
基于Spark的公安大数据实时运维技术实践
本文首先对公安运维管理现状做了简要介绍，然后介绍公安实时运维平台的整体架构，再以交换机Syslog信息为例，详细介绍如何使用Flume+Logstash+Kafka+Spark Streaming进行实时日志处理分析，对处理过程中大量的技术细节进行了描述并通过代码详细地介绍整体处理步骤。

2017-01-04 10:29:37

Spark运维技术
以大数据助力供给侧结构性改革
对于供给侧结构性改革而言，大数据的重要性还在于其能够集中反映市场需求变化，打通供需之间的内部联系，总结规律、预测趋势、辅助决策，为改革提供精细化服务。推动供给侧结构性改革，落实“三去一降一补”，并不是忽略需求的作用，而是要坚持以市场需求为导向，增强供给结构对需求变化的适应性和灵活性。

2017-01-04 10:27:49

大数据动向
气候变化时代的大数据农业
考虑到气候变化已经对作物产量造成了显著的负面影响，农民需要得到尽可能多的帮助。步入“农业物联网”时代，一系列强大的大数据工具正在帮助农民降低成本、提高产量和应对气候变化导致的环境新挑战。

2017-01-04 10:12:15

大数据农业气候
数据中心那些常见的问题
虽然数据中心运营商的冷却管理比十年前要好得多，但许多设施仍然面临着容量不能充分被利用及浪费能源等问题。专家表示，气流管理的最终目标是更好地控制IT进气口的冷却温度设定值，同时使得传送至数据大厅的空气量最小化。

2017-01-03 19:12:56

数据中心冷却机架
浅谈数据中心的选址:混合跨城域网络
像亚马逊，戴尔，谷歌，微软和雅虎这些企业都将他们的大型内容数据中心设在华盛顿州。其中许多设施都位于一个名叫昆西的乡村小镇，因为该地区有水坝优势，能够提供低成本的绿色电力资源。距离这些农村地区最近的城市西雅图和波特兰也有300公里，像其他远程数据中心一样，选址在这些地方的数据中心也面临着许多新的挑战。

2017-01-03 19:07:03

数据中心网络远程数据中心
烧钱做的医疗大数据要怎么变现？
互联网信息技术已覆盖了国内多数的公立医院，华东地区二级以上医院的信息化建设覆盖率在2004年就已经达到90%以上。既然“地”圈完了，钱也烧完了，那医疗数据要如何变现?互联网和信息技术公司要如何扭亏为盈?

2017-01-03 10:27:42

医疗大数据医院
大数据时代的隐私保护
隐私数据泄露的主要途径包括以下两个方面：非交互式泄露：主要指在信息系统内部的隐私泄露，多发生在业务流程中有多个节点可以对数据进行访问;交互式泄露：主要是针对信息使用传递过程中发生的泄露，可能发生在区域性平台数据交互等环节，虽然有基于角色访问控制的技术，但是在权限分级、设定、信息分级等方面有较大的难度。

2017-01-03 10:23:18

大数据隐私保护
大数据热的冷思考：无法取代传统的新闻传播科研方法
在网络传播技术高速发展的今天，“大数据”一词甚嚣尘上，在各行各业中都被热切地讨论。传媒学界和业界对大数据具有各种美好的期待，

2017-01-03 08:44:45

大数据取代新闻传播
大数据分析模型成功关键因素之我见
每个人都在谈论这个时尚的话题，但迄今为止只有极少数企业真正成功的运用这一技术!导致这一情况的重要原因就是企业对建立可操作的大数据分析模型成功关键因素缺乏深刻的认识。

2017-01-03 08:36:15

大数据关键模型
大数据的下一步：AI、ML、DL
开源大数据技术Hadoop，在今年刚好满十岁。在大数据的第一个十年，Hadoop成功地让大数据成为最被看好的技术，这股大趋势，不仅影响资讯科技的走向，更成为商业热烈讨论的议题。

2017-01-03 08:26:11

大数据AIML
运营入门，从0到1搭建数据分析知识体系
数据分析在运营工作中无处不在，无论是活动复盘、专题报告、项目优化，还是求职面试，数据分析都有一席之地。

2016-12-30 17:04:57

数据分析用户
区块链对人工智能的变革：去中心化将带来数据新范式
本文基于我个人在人工智能和区块链研究方面的经验，描述了区块链技术可以如何辅助人工智能。二者结合一处即发!区块链技术——尤其是行星尺度的——可以帮助实现人工智能和数据团体长期以来的一些梦想，并打开一些机会。

2016-12-30 16:38:43

区块链大数据人工智能
大数据分析报告价值百万or分文不值？
曾经，咨询公司一份报告就能收取企业几十万、甚至于上百万。而今，矫枉过正，数据分析报告却常常被企业认为没有任何实际价值。我经常和企业交流，他们告诉我，需要的是能够为他带来直接价值的东西，比如广告投放能够直接带来收入，所以他们舍得投入;但是因为报告不能够对企业产生任何实际的价值，所以他们不需要数据分析报告。

2016-12-30 16:30:52

大数据数据分析大数据报告
“隐私—数据收集”问题的两难分析
在大数据时代，信息开放与隐私保护由于性质差异，已成为一对天然矛盾体。斯皮内洛将“善”置于道德核心的道德分析框架，为这一网络问题的解决提供了理论指导。但在具体分析过程中，这一纲领中的“抱有善意”会引发“善/恶动机界定两难”和“动机/结果吻合度两难”问题;“优先取舍”则引出了“此消彼长/利益均衡两难”和“既得利益/隐含危害两难”问题。伦理学中的两大基本理论“目的论”和“义务论”可以为“隐私-数据收集”问题的解决提供新思路。

2016-12-30 16:24:51

数据收集数据采集大数据
SDN技术在数据中心的应用前景
SDN是近年来继云计算后，学术界和产业界最关注的热点，被国际研究机构Gartner列为未来五年内IT领域十大关键技术之一。2012年，谷歌宣布已在数据中心内部骨干网络上成功使用SDN技术，标志着SDN进入到商用化阶段。据国际著名咨询机构IDC估计，2013年SDN的收入将达到3.6亿美元，到2016年这一数值将上升至37亿美元。谷歌的成功经验，也使得数据中心成为业界各方推广SDN技术的首选场景。

2016-12-30 16:18:36

SDN数据中心网络
如何在不增加投入的情况下让你的数据库快上200倍
如果数据不是正态分布的可以吗?还能看到那些特征值吗?它是否需要一个特定的数据库?我希望能在这篇文章结束之前回答所有问题，不过先让我介绍完其它的场景，在这些场景里你会看到一些更有意思的想法：以快200倍的速度看到99.9%准确度的结果!

2016-12-30 14:01:44

数据库投入
大数据的三大夯石：数据、区域链、算法
环境不断变化，新技术层出不穷，新组织建设不断，这都会对我们的商业模式造成颠覆性影响，因此我们必须要了解未来到底会发生什么。2017年即将如约而至，面对未来，你准备好了吗?

2016-12-30 13:30:27

大数据区域链算法
AI 初学者入门指南：深度学习的五级分类
最基本的 AI 类型，无法产生记忆，不能利用过去的经验做决策。它们是“专才”而非“通才”，为完成特定任务所设计，不能胜任其他任务。

2016-12-30 13:23:30

AI 初学者分类
《财富》杂志专访：“The Machine”为何让HPE CEO梅格如此骄傲？
前不久， HPE全球CEO梅格女士在接受《财富》杂志访问时，不无骄傲地分享了公司的最新动向：The Machine的原型机已经问世了。什么样的机器会被称为“The Machine”?又为什么会令《财富》这样的顶级媒体不断打探?梅格只是颇有深意地说：它正在打破一切陈规。

2016-12-30 13:15:47

大数据技术
腾讯马斌：互联网+大数据助力产业转型升级
要应用好数据，最终的大数据不是因为你大数据，而是因为你大计算，你的计算能力才是你的核心能力。未来以后的产品，特别是随着大数据，以及智能计算，特别是人工智能计算，让我们所有的产品懂人、拟人、代替人、超越人，这就是未来发展的规律。

2016-12-30 12:49:40

大数据互联网动向
Hadoop开发过程中所遇到的那些坑
每次对NameNode格式化之后都会产生一个新的namespaceID，如果多次对NameNode格式化的话可能导致NameNode节点和DataNode节点中存放的版本号不一致。

2016-12-30 11:10:32

Hadoop开发JVM
大数据产品分析：浅析数据可视化
数据可视化的发展，将改变传统的管理方式，让数据的呈现更及时、更直观、更简单。

2016-12-29 20:05:56

数据可视化大数据产品分析
数据中心网络架构最新变革一览
由于混合云服务和容器的普及，现如今的数据中心网络比以往任何时候都更加难以被破解。但是如若遵循一条简单的路径，IT人员就可以成功。

2016-12-29 19:59:33

数据中心混合云网络
追求环保高效的数据中心的5大策略
在调查了当今关于数据中心所采取的绿色环保战略的传统想法之后，我建议数据中心管理人员们不妨采用一套新的策略。

2016-12-29 19:54:53

数据中心绿色环保
分析工具很难选? 看他们如何挖掘大数据价值
预测建模，机器学习和其他先进的分析应用程序，有助于挖掘大数据系统的商业价值，但对于许多用户来说，这需要使用大量的工具，并付出一定努力才能达到预期。

2016-12-29 19:48:01

数据分析大数据Hadoop
大数据的前世今生
关于大数据特征方面，特别要强调的一点是数据是在线的，因为很多人认为数据量大就是大数据，往往忽略了大数据的在线特性。数据只有在线，即数据在与产品用户或者客户产生连接的时候才有意义。

2016-12-29 18:21:01

大数据动向前世今生
2016年终盘点大数据篇：跨越巅峰，迈向成熟
大数据技术在2016年继续取得高速的发展，并且在大数据相关的每个细分的环节，都有不同的创新的点。让我们来看看这一年，大数据技术的一些重要进展和趋势。

2016-12-29 18:12:56

大数据动向
大数据在2017年发展的8个预测
又到了年终岁尾时，业界权威市场研究和咨询机构Ovum公司日前估计，大数据市场规模将从2016年的17亿美元增长到2020年的94亿美元。随着市场的增长，企业的挑战正在转变，对人们的技能需求正在改变，而大数据服务供应商的景观也在风云变幻。2017年将是大数据专业人士更为忙碌的时刻。以下是一些来自相关行业观察家和技术专家对大数据在2017年的发展预测。

2016-12-29 14:37:17

大数据数据物联网
企业间的较量 2017大数据的十个走向
大数据发展已经成为未来科技发展的走向和必要的开端，预计2017年大数据十大新趋势走向将会迎来爆发式的数据增长。

2016-12-29 14:33:54

大数据数据可视化
2016国外10家引人注意的大数据初创公司
大数据技术市场正处于这样一个阶段：Garnter认为是从IT主导的、报告系统转向业务主导、自助式服务分析的最后阶段。其结果是出现了很多新业务智能和分析平台可以满足企业机构对可访问性、敏捷性和更深入的分析洞察力的要求。

2016-12-29 14:27:50

大数据初创公司数据
从零搭建推荐体系：概述及标签体系搭建(上)
本文阐述整个推荐体系从0搭建的全流程，也是最近以来一直深入研究的成果展现。

2016-12-29 10:42:30

零搭建概述标签
从零搭建推荐体系：用户体系、项目体系和推荐体系(中)
使用与满足理论是站在受众的立场上，通过分析受众对媒介的使用动机和获得需求满足来考察大众传播给人类带来的心理和行为上的效用。但同传统的讯息如何作用受众的思路不同：它强调受众的作用，突出受众的地位。该理论认为受众通过对媒介的积极使用，从而制约着媒介传播的过程，并指出使用媒介完全基于个人的需求和愿望。

2016-12-29 10:32:06

零搭建项目用户
干货丨大数据系统数据采集产品的架构分析
任何完整的大数据平台，一般包括数据采集、数据存储、数据处理、数据展现(可视化，报表和监控)这几个过程。我们今天就来看看当前可用的一些数据采集的产品，重点关注一些它们是如何做到高可靠，高性能和高扩展。

2016-12-28 19:50:33

大数据数据采集大数据平台
IT团队动起来：数据中心基础设施管理的四个调整策略
数据中心基础设施管理，从不间断电源系统的维护到计量电源效率，对IT团队来说这是不断发展的领域。举例而言，如电力使用效率的旧指标无法再理解数据中心的效率，且增加功率密度可导致更具破坏性的冷却故障。这一切意味着为了保证数据中心的高效和成本，调整数据中心基础设施管理策略来适应这些标准的改变是非常重要的。本文列出了IT人员可着手的四个技巧。

2016-12-28 19:46:40

电源数据中心UPS
如何在不增加投入的情况下让你的数据库快上200倍
几乎每个人都在以这样或那样的方式抱怨数据库的性能问题，数据库管理员和程序员时常要面临服务器资源不够用或数据库查询一直执行不完的情况。这些情况对我们来说太正常不过了。解决办法多种多样，最典型的一种就是把枪口指向查询语句，并谴责程序员没能写出高效的查询。

2016-12-28 19:16:55

大数据数据库技术
大数据的2016全解析：持续火热、多点创新还不够，它瞄准的远不止于此！
即将过去的2016年，大数据技术在持续火热发展的同时，也在各细分领域取得了不同的创新。回顾大数据的2016，我们都得到了什么?2017年，会是大数据技术与人工智能融合迸发的时代吗?

2016-12-28 18:07:08

大数据大数据技术大数据发展趋势
论：MongoDB的好坏丑
对刚刚接触MongoDB的人来说, MongoDB就是一个NoSQL类型的文档数据库. 文档中包含的键值对，构成了MongoDB的数据基本单位。这篇文章中，我将根据过去几年来我使用MongoDB所得出的经验，简短的介绍下MongoDB的好处、坏处和它丑陋的地方。

2016-12-28 17:59:28

MongoDBNoSQL数据
5个常见的展示不同类型数据的错误形式以及如何避免
5个常见的展示不同类型数据的错误形式以及如何避免 数据可视化的普及和影响在相对较短的时间内急剧增加。 Google趋势显示，自2009年以来，数据可视化的搜索频率几乎增长了100%，我们已经看到了大量可用的工具和软件，几乎任何人都可以相对轻松地创建数据可视化。

2016-12-28 17:53:29

大数据数据可视化图像
Kafka在行动：7步实现从RDBMS到Hadoop的实时流传输
本文目标读者是技术人员。 继续读，我会图解Kafka如何从关系数据库管理系统(RDBMS)里流输数据到Hive， 这可以提供一个实时分析使用案例。 为了参考方便，本文使用的组件版本是Hive 1.2.1，Flume 1.6和Kafka 0.9。

2016-12-28 17:45:30

Hadoop大数据Kafka
基于机器学习方法对销售预测的研究
在开始今天的分享之前，我首先跟大家简单的聊一下，刚刚过去的双十一，大家可能更关心的是双十一的折扣，什么商品打了什么折扣。但是对于天猫而言，他们可能更关心的是双十一当天的销售额是多少，因为知道销售额，他就能提前做一个准备，做到未雨绸缪。

2016-12-28 15:19:22

大数据机器学习销售预测
我不告诉你，我们是这样“玩”数据的！
数年前，“大数据”还是一个很潮的词，仅仅停留在概念阶段。可如今，“大数据”已经深入到了各行各业，要是不和大数据沾点儿边，都不好意思出门。大数据如火如荼的今天，如何恰如其分的展现这些数据的价值成了摆在众多开发者面前的一道难题。

2016-12-28 14:51:46

大数据应用
2017大数据前瞻：十大趋势将迎爆发式数据增长
大数据发展已经成为未来科技发展的走向和必要的开端，预计2017年大数据十大新趋势走向将会迎来爆发式的数据增长。

2016-12-28 14:40:17

大数据前瞻动向
基于Apache Flink的实时计算引擎Blink在阿里搜索中的应用
Apache Flink®就是一种这样的技术，阿里巴巴正在使用基于Flink的系统Blink来为搜索基础架构的关键模块提供支持，最终为用户提供相关和准确的搜索结果。在这篇文章中，我将介绍Flink在阿里巴巴搜索中的应用，并介绍我们选择在搜索基础架构团队中使用Flink的原因。

2016-12-28 14:27:24

大数据Apache Flin搜索引擎
Python在实时嵌入式系统开发中扮演的五个主要角色
学生和工程师会逐渐地更加熟悉Python语言。一些人可能会认为制造商的行为和Raspberry Pi 是促使Python在流行榜名单往前移动的原因之一。

2016-12-27 09:24:13

Python系统开发
HBase原理－数据读取流程解析
HBase中更新删除操作并不直接操作原数据，而是生成一个新纪录，那问题来了，如何知道一条记录到底是插入操作还是更新操作亦或是删除操作呢?这正是KeyType和Timestamp的用武之地。

2016-12-27 09:08:34

HBase数据流程
API 设计的最佳实践
如果你重新思考了某个资源或集合的功能，应该把它放入下一个迭代中。开发和维护API是一个持续的过程，等待正确的用户反馈可以构建一个健壮的API，以帮助用户以创造性的方式集成和开发应用程序。

2016-12-27 08:49:55

API设计策略
企业在数据湖实施之前需要试水
数据仓库存储来自整个组织的较旧的数据，用于报告和分析。多个数据集市大致相当于数据仓库，通常在自己的IT环境中为子公司服务。

2016-12-27 08:36:49

数据Hadoop系统
挨踢部落第二期:大数据在医疗领域的应用和实践 原创
挨踢部落是为核心开发者提供深度技术交流，解决开发需求，资源共享的服务社群。基于此社群，我们邀请了业界技术大咖对开发需求进行一对一突破，解除开发过程中的绊脚石。以最专业、最高效的答复为开发者解决开发难题。

2016-12-26 17:01:44

大数据 医疗 移动
上一页 1 ··· 128129130131132 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服