鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 25年5月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

大数据

9088内容

关注

大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。

文章博文帖子课程

共 9088 条

克服大数据的五大挑战——一切答案尽在云服务

尽管已经有了大量的成功案例，但真正实施一项大数据项目并不是一件易事。事实上，其提出了许多挑战，其中任何一项挑战都可能使项目在开始之前就脱轨。在其大数据和分析调查报告中，IDG确定了如下这5大挑战。

2018-01-12 14:11:35

大数据云服务安全

交通数据太庞大，不如交给可视化处理

伴随着大数据可视化的热潮，在交通数据中使用可视化可以帮助人们有效地理解移动车辆的行为、发现交通在时空上的模式，从而为交通优化等提供决策信息。当代交通系统每时每刻都会产生大量的数据

2018-01-11 17:44:13

交通数据交通可视化大数据

干货：最受欢迎编程语言c与大数据开发实践

IEEE Spectrum的第三次“最受欢迎编程语言”中，C语言居首，有人说是大数据赢了。本文将探讨c与大数据的开发实践。大数据是使用工具和技术处理大量和复杂数据集合的术语。能够处理大量数据的技术称为MapReduce。

2018-01-11 17:22:20

PHP 大数据开发

2017饮酒大数据报告：酒瓶可绕地球129圈

日前，酒类垂直电商第一平台酒仙网发布了《2017年酒仙网饮酒大数据报告》。数据显示，2017年酒友们共喝掉43304208瓶酒，喝掉的酒连起来可以绕地球129圈。广东、山东、北京位居最能喝省(市)的前三名，合计喝掉了近一半的酒。

2018-01-11 16:41:01

大数据喝酒洋酒

物联网与大数据的应用结合让人类生活更美好

近年来“物联网”(IoT)和“大数据”是两个最受瞩目的话题。在物联网的概念里，有关任何开和关切换到网络的设备皆会彼此连接，它们之间都彼此相互连结。

2018-01-11 16:17:12

物联网大数据 Hadoop

数据告诉你：中国城市谁在腾飞？谁在衰落？

像一个生命体一样，任何城市在众多城市构成的生态圈中既相互依赖又相互竞争。在这个日趋激烈的赛场上，中国城市未来发展的关键词是什么？本文试图从历史演变和资本的角度进行一番梳理、归纳与分析…

2018-01-11 15:56:37

大数据中国城市未来发展

如何设置大数据和人工智能来转换在线游戏

如果在2017年有两项技术进步据说已经成熟的话，那么肯定是虚拟现实和人工智能。虽然虚拟现实的使用是所有人都可以看到的，毕竟，人们对于戴上一副VR眼镜更感兴趣，人工智能的应用可能会更微妙。如此微妙，甚至很多人都没注意到。

2018-01-11 09:37:11

大数据人工智能游戏

大数据行业2017年度盘点：双重暴击，浴火重生

2017年，是大数据行业最为艰难的一年。监管对数据乱象出手，从今年5月就开始了清理行动，几十家数据公司被调查，上万数据接口关停，一些公司开始裁员，行业风声鹤唳。而另一方面，行业还承受了来自监管和业内人的质疑和否定。

2018-01-10 08:53:23

大数据监管数据共享

数据组织的自我学习将在2018年兴起

2018年将是人工智能和机器学习的一年：在过去的几年里，人们一直在预测企业使用人工智能和机器学习(ML)方面可能取得的突破。虽然这方面的初创企业层出不穷。

2018-01-09 16:52:50

数据组织数据管理大数据

大数据要充分利用但更要保护用户隐私

全球进入移动互联网时代后，一个巨大进步是一切活动都在往移动互联网这个舞台上转移。所有社会活动、金融交易等都在网络上留下了痕迹或者说有迹可循。由此带来的进步是革命性、历史性和颠覆性的。

2018-01-09 16:00:33

大数据隐私数据信息

进阶成优秀数据科学家必不可少的 10 步

当今计算机世界对数据科学的狂热追捧并不是没有缘由的。《哈佛商业评论》将数据科学家列为未来几年最热门的职位上之一，加上诱人的薪水，数据科学家已经成为是许多人梦寐以求的新事业。

2018-01-09 15:51:05

数据科学大数据工程师

大数据的本质是什么，在竞争之中存在哪几误区？

继物联网、云计算之后，“大数据”迅速成为大家争相传诵的热门科技概念。“大数据”作为信息社会发展的一个新生事物，目前尚处在逐渐被认识、被应用的初始阶段，无论是学术界还是IT行业对大数据的理解各有侧重，尚未形成一套完整的理论体系，因此很难进行精准的定义。

2018-01-09 15:18:08

大数据大数据竞争分析

2017年我国大数据产业发展五大新突破

2017年接近尾声，这一年大数据新模式、新业态层出不穷，面对五大瓶颈问题——数据资源开放共享程度低、技术创新与支撑能力不强、大数据应用水平不高、大数据产业支撑体系尚不完善及人才队伍建设亟需加强，打开突破口。

2018-01-08 16:38:25

大数据数据人才数据资源

欧盟委员会竞争部门总监的大数据提案的含义和目标

大数据改变了欧洲企业的性质，但没有得到相关监管机构的关注。欧盟委员会竞争部门总监宣布将采取更有力的措施确保大数据得到公平使用。

2018-01-08 16:01:53

大数据欧盟委员会数据隐私

遭遇成长烦恼 2017AI大数据行业回顾

本篇文章主要回顾人工智能和大数据在2017年的发展遇到下10个成长的烦恼。下面，我们一起来看。

2018-01-08 08:55:48

AI 大数据人工智能

大数据测试类型&大数据测试步骤

大数据是一个大的数据集合，通过传统的计算技术无法进行处理。这些数据集的测试需要使用各种工具、技术和框架进行处理。大数据涉及数据创建、存储、检索、分析，而且它在数量、多样性、速度方法都很出色。

2018-01-05 13:50:17

大数据数据集合测试

数据化，从现实世界向虚拟世界的大迁徙，是一切的归宿

未来不知道是否“已来”，但可以肯定的是，未来已经越来越清晰可见。在人工智能、云计算和大数据的驱动下，也许有天，人的意识可能会以数据的形式存在。看起来，“数据化”是商业机会，但也会是人类的宿命。

2018-01-05 13:45:34

数据化互联网人工智能

大数据和云计算的冲突

最近，IT行业专家在参加相关会议时发现了一个隐藏的主题，那就是虽然很多人将关注的重点转移到基于云计算的架构(混合云)以及所需要的云管理平台，但会议的报告表明，很多人都承认并没有密切关注全球数字数据量的巨大增长

2018-01-04 13:39:34

大数据云计算 IT行业

2018年中国大数据产业8大趋势前瞻

刚刚过去的2017年，大数据产业持续呈高速增长，各地方政府纷纷开启数字化转型之路，大数据被广泛应用于政府监管、社会治理、经济转型等诸多实践领域。2018年，在建设“数字中国”的大趋势下，作为数字经济转型排头兵的大数据产业将会有哪些新的发展趋势?

2018-01-04 13:25:12

大数据数据安全机器学习

使用Python+机器学习方法进行情感分析(详细步骤)

机器学习的方法精确度更高，因为词典匹配会由于语义表达的丰富性而出现很大误差，而机器学习方法不会。而且它可使用的场景更多样。无论是主客观分类还是正负面情感分类，机器学习都可以完成任务。而无需像词典匹配那样要深入到词语、句子、语法这些层面。

2018-01-04 13:07:43

Python 机器学习情感分析

大数据2018：云存储已在客观层面扮演数据湖角色

尽管AI、物联网以及GDPR（一般数据保护条例）持续占据头条，但也不要忘记在大数据的实现性应用方面，云迁移与流分析所产生的划时代影响。

2018-01-04 08:27:57

大数据云存储数据湖

华为开放平台助力中信银行（国际）打造统一数据仓库

华为通过FusionCube一体机，预集成了网络、计算、存储、虚拟化操作系统和分布式存储软件，采用“X86服务器+分布式存储”的架构替换传统的“RISC服务器+SAN存储”的架构。

2018-01-03 22:14:31

DataHunter马珂：数据可视化分析应该怎么玩原创

DataHunter CTO马珂接受了51CTO的专访，同记者就探索式数据分析技术、图形化技术、数据可视化工具等方面进行了深入探讨。马珂曾是海军总部工程师，长期从事数据库管理、优化，数据挖掘和可视化相关工作，有很丰富的实践经验。

2018-01-03 17:22:22

DataHunter 数据可视化分析

低学历成功逆袭概率多少？大数据揭秘结果令人震惊

美联储St.Louis 分部的统计数据，说明了家庭中受教育程度最高者（需大于40岁）的受教育程度与家庭净财富超过100万美元的比例的关系。

2018-01-03 10:44:10

学历大数据互联网

数据科学家本地处理大中型数据的三种简单方法译文

作为数据科学家，我们通常面临庞大的数据集，少则几千万条记录，多则几亿条记录，可能有几十列，甚至几百列。这些数据通常以csv文件来接收，以多种方式来处理，最终目的是运行用Python或R编写的复杂的机器学习算法。

2018-01-03 09:00:06

数据科学家 Python R语言

大数据关键技术分析

在面对计算能力不足时，我们应尝试着结合使用更多的计算机系统，而Hadoop就是基于这样的理念设计。

2018-01-03 00:38:20

大数据 Hadoop 分布式文件系统

AI和大数据2017“成长的烦恼”

人工智能和大数据在2017年的发展遇到了以下10个成长的烦恼，包括:人工智能无IQ标准、人工智能延伸边缘、AI嵌入超算和云计算、大数据风口已过、.数据保鲜难等等。

2018-01-02 12:22:36

人工智能大数据 IQ

数据科学家是干什么的？听七位受欢迎的专业人士发表见解

我们中的很多人上大学时，那时没有数据科学家的职位。这是分析数据的科学和统计方法混合在一起，知道如何使用从海量数据库中提取模式和答案的工具。听起来很沉闷?还好啦。事实上，早在2012年，《哈佛商业评论》就把它称为“21世纪最性感的工作”。

2018-01-02 12:14:17

数据科学家独角兽数据

数据可视化的开源方案: Superset vs Redash vs Metabase (一)

今天给大家介绍三个比较知名的项目，分别是Superset, Redash和Metabase。前两个我都在产生环境中实际使用过，在本文中会重点介绍。Metabase我只是试玩了一下，但我觉得这是一个非常有想法的项目，所以也会和大家聊聊我对它的看法。

2018-01-02 11:13:20

数据可视化 Superset Metabase

全球各行业2020年将需要270万位数据科学家

数据分析的工作量庞大复杂，这对企业、公司和政府的影响也很大，因此对数据科学家的需求日益增长。数据科学家有着一份很好的工作前景，具有吸引人的薪酬。数据科学家被称之为2017年最好的工作之一。

2017-12-29 16:39:22

数据科学家语言 Python

大数据告诉你：2018年该学习什么技术

数据科学家Julia Silge在Stack Overflow官方博客上分享了一组分析数据，他在文中揭示了快速增长的技术，快速衰落的技术，稳步增长的技术。我们从中可以看到，2018年你学习什么技术最值钱！

2017-12-27 22:13:34

大数据技术 Swift

大数据变现给了数据建模者自证价值的好机会

从 BI 时代开始，笔者曾经做过取数，报表，建模，挖掘，分析等各类数据支撑工作，有个问题一直萦绕心中，数据支撑者如何证明自己工作的价值。

2017-12-27 15:27:36

大数据数据建模数据支撑

有点意思!如果圣诞老人利用大数据派送礼物是这样的……

12月24日，几十年来，圣诞老人一直没有升级他的装备。但他对高科技并不陌生，今年，得益于一系列大数据技术，圣诞老人终于调整了送礼方式，以提高效率，完善客户服务。

2017-12-27 14:49:26

大数据派送礼物圣诞老人

Hadoop和Spark之间有什么区别，现工业界都在使用何种技术?

谈到大数据，相信大家对hadoop和Apache Spark这两个名字并不陌生。然而，最近业界有一些人正在大张旗鼓的宣扬Hadoop将死，Spark将立。他们究竟是危言耸听?哗众取宠?还是眼光独到堪破未来呢?与Hadoop相比，Spark技术如何?现工业界大数据技术都在使用何种技术?如果现在想要参加大数据培训的话，应该从哪一种开始呢?

2017-12-27 14:39:07

Hadoop Spark 大数据

Mixpanel用事实证明，数据分析现在可以知道我们何时打开圣诞礼物

孩子们睁开朦胧的双眼，他们的父母也被从床上叫醒，在圣诞节早晨，有几个小时全家人似乎都放下了手中的移动设备。这是移动与网络数据分析公司Mixpanel最新报告得出的一个结论。

2017-12-27 14:15:47

大数据数据分析圣诞

2017年云计算和数据中心产业的回顾与总结

如果回溯到2016年，很多大型企业的数据中心工作负载正计划向云端迁移。而2017年则是企业的业务向云端迁移的一年，这种迁移在整个数据中心行业引起了很大的反响，为云计算技术供应商和数据中心提供商带来了巨大的变化。

2017-12-27 14:09:47

云计算数据中心混合云

Wikibon 2018预测：数据和云将变革所有企业

科技领域有个预测很简单：数字化转型仍然是2018年企业的首要战略。但是哪些问题将会塑造未来几年的转型方向?为了回答这些问题，Wikibon分析师最近举行了年度预测网络研讨会。

2017-12-27 11:51:58

数据云软件

揭穿数据分析的12个神话

在IT业界中，炒作越多，误解就越多，数据分析也不例外。作为当今IT技术最热门的方向之一，数据分析可以带来显著的业务收益，但是带来的误解可能也会阻碍顺利地、及时地交付可能让业务用户和最终客户受益的分析能力。随着企业组织创建或者扩展其分析战略，这里有十几个需要揭穿的数据分析神话需要他们牢记在心。

2017-12-27 11:38:14

数据分析大数据算法

中科天玑：引擎驱动+产业融合，布局大数据生态体系闭环原创

中科天玑数据科技股份有限公司（以下简称中科天玑）是国内较早做大数据的企业，成立之初以互联网信息挖掘、舆情监测业务起家。时至今日，凭借数据处理和分析引擎驱动创新、且与产业深度融合，成为大数据领域的佼佼者。

2017-12-27 10:44:26

引擎驱动产业融合大数据生态

年终盘点：2017年数据科学发展的新趋势

因为数据的存在，让很多新的行业焕发出了无限的价值，社交媒体网站可能就是一个典型的例子。对于企业来说，目前的主要问题就是如何使用收集来的数据创造价值。

2017-12-26 22:15:22

数据科学大数据数据库

泛谈大数据 + AI 在征信行业的应用

能够考虑过去可能没有得到信用评分的人，或者可能被传统的基于逻辑回归的评分太匆忙地拒绝了。换句话说，AI可以查看消费者信用记录中的某些数据点，计算他们即将偿还的概率;或者考虑那些过去12个月都没有还款(基于某些原因)，但是在某一个数据点，他们偿还了所有的款项的人群。

2017-12-26 16:42:41

AI 大数据征信行业

数据是“新时代的石油”：一个误读?

自从《经济学人》将数据类比为21世纪的石油以来，数据的重要性已家喻户晓。但是，这一比喻令人误解，因为它不但容易让人联想到洛克菲勒的标准石油公司或美孚石油公司，还会误认为现在的数据就像一百年前的石油那样，成为市场上奇货可居、盈利丰厚的商品。然而，正规的数据交易市场根本没有形成，更不用说在数据市场里呼风唤雨的数据大鳄了。

2017-12-26 15:38:02

新时代的石油大数据数据

数据将主导一切？研究发现53%的公司正在使用大数据分析

本文主要结论与资料来自于研究公司Dresner Advisory Services最新的大数据研究报告“2017 Big Data Analytics Market Study”，这是该公司Crowds®系列研究中的一部分。本系列报告连续第三年考察与分析了大数据分析最终用户的使用趋势与使用意图，并将大数据分析定义为最终用户能够访问、分析和管理Hadoop生态体系中数据的一套系统。

2017-12-26 14:16:32

大数据数据分析 Hadoop

IDC公司对数据中心发展的10大预测

数据中心的生命周期通常以数十年的时间来衡量的，但其技术和产品却在不断变化。"如今的数据中心实际上与其内部设施的发展并不不匹配，因为电源，散热和空间需求等都已经全部发生变化。"调研机构IDC公司数据中心趋势与策略小组研究总监Jennifer Cooke表示。

2017-12-26 11:45:36

数据中心 IDC IT基础设施

聊一聊大数据的问题和缺陷

多亏了大数据和云计算，可以让企业使用超级计算机的力量。而人们面临的问题是用来分析和应用大数据的工具通常有一个致命的缺陷。人们进行的大部分数据分析都是基于错误的模型，这意味着错误是不可避免的。当人们夸大的期望超过其能力时，后果可能是可怕的。

2017-12-26 10:19:14

大数据问题缺陷

大数据对移动应用程序开发有哪些影响？

如果要说“一个成功的移动应用程序开发的关键因素是什么?”那么，大数据和数据分析的贡献不可磨灭。下面，我们就来看看大数据对移动应用程序开发有哪些影响？

2017-12-26 00:46:09

大数据移动应用程序开发

利用大数据和预测分析优化供应链

如今，业界人士都在谈论大数据，但这究竟意味着什么呢?大数据被定义为极其庞大的数据集，无论是结构化的还是非结构化的数据，都要进行分析以揭示模式、趋势和关联，特别是关于人类行为和相互作用。

2017-12-25 14:19:31

大数据预测分析供应链

2018年技术预测：五大危机还是五大机遇？

预测就像是公共巴士，要么没人来，要么就好几个人一起来。不仅如此，它们比你想的要来的慢，而且只是把你带到了路边。它们还非常热闹，充满了你早上通勤时不想听见的种种喋喋不休的声音。他们有时候很冷，在座位的角落里还可能有别人没吃完而留下来的快餐。

2017-12-25 10:34:18

技术预测机遇

没有大数据，商业智能能够回答正确问题吗？

“商业智能”和“大数据”指的是完全独立的过程，它们各自实现各自的功能，尽管在同一个整体领域。

2017-12-22 11:29:15

大数据 AI 智能

编译Hadoop2.9源码并搭建环境

因为以前安装hadoop编译版的时候遇到过问题，时间比较久了，具体问题有些描述不清了，建议大家下载源码自己编译安装，如果遇到bug自己直接可以修改安装。本文的实验系统是mac，但是其他环境类似。

2017-12-22 10:51:04

Hadoop 编译环境

上一页 1 ··· 105 106 107 108 109 ··· 182 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营