51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术25年5月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9088内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9088 条
大数据在智慧城市建设中的深度应用
为了应对城市化所带来的全新挑战，各国不约而同的以智慧城市建设作为解决问题的抓手。中国作为全球最大的智慧城市实施国之一，无疑也将其作为重中之重。

2019-09-02 15:49:06

大数据智慧城市大数据建设
技术人最不该忽视可视化数据分析！
在这个“人人都是数据分析师”的时代，阿里的同学几乎都在参与数据的采集、加工与消费。数据可视化作为连接“加工——消费”的重要一环，其质量至关重要。优秀的可视化能促成卓越洞见，糟糕的内容则让所有的努力失去意义。

2019-09-02 15:40:25

可视化数据分析
Pandas循环提速7万多倍！Python数据分析哪种更快？
用Python和Pandas进行数据分析，很快就会用到循环。但在这其中，就算是较小的DataFrame，使用标准循环也比较耗时。

2019-09-02 15:12:46

Python 开发数据分析
云+社区联合快手 深度解读五大热门大数据技术 原创
8月24日，由云+社区（腾讯云官方开发者社区）联合快手举办的《大数据技术实践与应用》沙龙活动成功举行，沙龙聚焦于大数据的技术实践与应用，为到场的用户奉上了一场大数据技术盛宴。来自腾讯云的专家和快手的工程师重点介绍了Spark、ElasticSearch，yarn、MapReduce、Flink等大数据技术的发展历程、架构优化以及实践应用。

2019-09-01 21:20:18

腾讯云大数据
大数据是否会导致更多量化的战略决策模型?
大数据正在改变组织决策的未来。阿莱因科技大学教授Belkacem Athamena撰写了一篇关于决策中大数据演变的白皮书。由于新的大数据技术使决策更加可靠，因此企业将比以往更加重视量化决策模型。

2019-08-30 11:18:19

大数据技术系统
写给大数据从业者：数据科学的5个陷阱与缺陷
这篇分享主要总结了数据从业人员在实践中可能遇到的陷阱与缺陷。跟其他新起的行业一样，数据科学从业人员需要不停的去考虑现在，考虑未来；需要不断的斟酌工作方法的合理性，正确性。思索不断，才能前行。

2019-08-29 10:20:13

大数据IT互联网
你的隐私被泄露了！大数据时代如何保护信息安全？
现在的社会是一个高速发展的社会，科技发达，信息流通，人们之间的交流越来越密切，生活也越来越方便，大数据就是这个高科技时代的产物。麦肯锡称：“数据，已经渗透到当今每一个行业和业务职能领域，成为重要的生产因素。”

2019-08-28 17:23:20

信息安全大数据技术
大数据主导的七大领域，看看你是否身处其中
在《大数据：一场改变如何我们生活，工作和思考方式的革命》一书中，Viktor Mayer-Schönberger和Kenneth Cukier认为，“大数据分析是一种革命性的工具，主要用于商业，科学，研究，媒体行业，和社交生活。”大数据跨越了标准技术产业的高墙，并扩展到了其他非技术领域。

2019-08-28 17:05:18

大数据技术人工智能
7步搞定Python数据可视化，大牛出品教程，Jupyter、Colab版都有
做图表，谁不会？打开Excel，自动就可以生成各种各样的图表。但你看这些图表呢？

2019-08-28 15:51:41

Python 开发编程语言
7个原因告诉你数据科学家为什么“供不应求”
在过去几年中，各行各业都拥有各种形式的海量数据，包括内部数据、合作伙伴、客户以及大规模业务信息。对高级数据科学家的需求改变了市场趋势，以下是影响印度数据科学工作需求统计的主要因素。

2019-08-28 08:08:47

数据科学家数据工程师数据科学
数据处理必看：如何让你的Pandas循环加快71803倍
如果你使用 python 和 pandas 进行数据分析，那么不久你就会第一次使用循环了。然而，即使是对小型数据集，使用标准循环也很费时，你很快就会意识到大型数据帧可能需要很长的时间。当我第一次等了半个多小时来执行代码时，我找到了接下来想与你共享的替代方案。

2019-08-27 17:32:10

数据处理PandasPython
数据科学中的强大思维
如果你参加过统计学入门课程，就会知道数据点可以用来激发灵感，也可以用来测试理论，但两者却不能兼顾，这是为什么呢?

2019-08-27 09:34:29

数据科学统计机器学习
海量样本无从下手？五种抽样算法分分钟搞定
数据科学是研究算法的学科。本文介绍了一些常见的用于处理数据的抽样技术。

2019-08-27 09:03:48

抽样技术数据科学算法
Hive和Spark究竟是凭借什么优势而大获成功？
Hive和Spark凭借其在处理大规模数据方面的优势大获成功，换句话说，它们是做大数据分析的。本文重点阐述这两种产品的发展史和各种特性，通过对其能力的比较，来说明这两个产品能够解决的各类复杂数据处理问题。

2019-08-27 08:36:34

HiveSpark数据库
数据科学家为什么这么贵？
当你听到“数据科学家”这个头衔时，你会想到什么?可能不是一个衣衫褴褛、表情严肃的白领，对吧?也许这就是为什么《哈佛商业评论》(Harvard Business Review)将“数据科学家”称为“21世纪最性感的工作”。他们写道，“如果‘性感’意味着拥有非常抢手的稀有品质，那么数据科学家已经在那里了。

2019-08-26 09:47:56

数据科学家数据分析
大数据需求使用的六个Hadoop发行版
Hadoop可以在不同的发行版中使用，因为公司通常将其作为打包交易提供。它使用Hadoop分布式文件系统(HDFS)，它允许使用不同的平台和执行并行数据处理的能力。在这里，我们将讨论六种可用于满足大数据需求的Hadoop发行版。

2019-08-26 09:39:53

Hadoop发行版大数据
大数据需求使用的六个Hadoop发行版
Apache Hadoop是一个出色的软件框架，允许处理大数据元素。它可以通过采用模块化系统和处理大量数据来使用商用硬件的强大功能。Hadoop可以在不同的发行版中使用，因为公司通常将其作为打包交易提供。

2019-08-26 09:20:43

Hadoop大数据数据库
美漂数据科学家年薪多少？爬了6年H1B签证数据发现，招的人多了，但钱少了
一位名叫Tony Yiu的数据科学家就想统计一下，在美国做数据分析师，到底收入如何?下面文摘菌就带大家一起看看，去美国当数据科学家一年能赚多少钱!

2019-08-25 12:02:53

数据科学家数据数据分析
数据工程要从全局性数据架构考虑
说到数据工程，给人的感觉往往是空间数据的采集、核查、规整、入库等过程。这些过程，距离主流IT所说的“数据工程”还是有些差异的。

2019-08-23 15:58:18

数据工程数据架构分析
常用的几种大数据架构剖析
随着大数据技术的发展，数据挖掘、数据探索等专有名词曝光度越来越高，但是在类似于Hadoop系列的大数据分析系统大行其道之前，数据分析工作已经经历了长足的发展，尤其是以BI系统为主的数据分析，已经有了非常成熟和稳定的技术方案和生态系统。

2019-08-23 15:55:27

架构大数据BI系统
如何成为一名更有“市场”的数据科学家？
这个标题可能有点奇怪，毕竟在2019年，数据科学家本身就已经是一个非常有市场的职业了。由于数据科学对当今的业务产生了巨大影响，因此对数据科学专家的需求正在增长。截至本文发布之前，仅LinkedIn就有144,527个数据科学工作。

2019-08-22 09:23:58

数据科学工程师数据处理
6个用于大数据分析的优秀工具
大数据是一个含义广泛的术语，是指数据集，如此庞大而复杂的，他们需要专门设计的硬件和软件工具进行处理。该数据集通常是万亿或EB的大小。这些数据集收集自各种各样的来源：传感器，气候信息，公开的信息，如杂志，报纸，文章。

2019-08-22 09:08:53

大数据HadoopStorm
“数据科学与大数据技术”专业为啥会这么火？就业前景有多好？
在刚刚结束的2019年高考录取中，可能有不少同学已经被一个新兴专业“数据科学与大数据技术”录取了，因为这个专业最近两年实在是太火了。

2019-08-22 09:07:11

大数据数据科学专业
大数据技术在在线游戏中产生了巨大的变化
大数据技术给在线游戏带来了巨大的变化。以下将阐述大数据如何在行业中产生重大影响。

2019-08-21 14:27:33

大数据网络安全
人工智能是一种改进数据控制和处理的好方法
数据处理当然受益于人工智能的使用，因为它允许从可用数据集中获得更多信息，同时确保减少错误，并且每一次数据处理练习的近似概率都会变得更好。以下阐述在数据处理中使用人工智能的一些重要好处，特别是在处理大数据。

2019-08-21 08:36:36

人工智能数据处理解决方案
物联网、大数据和人工智能，为什么总是“抱团出现”？
本文将阐述大数据、人工智能和物联网这些概念，并进一步探讨它们在工业中的重要性、面临的阻碍以及未来的发展方向。

2019-08-21 07:05:37

物联网大数据人工智能
大数据分析是21世纪医疗保健领域的颠覆者
21世纪医疗保健领域较大的颠覆者是大数据。医疗保健行业采用大数据将使其发展方式产生巨大变化。

2019-08-20 14:05:17

大数据数据分析医疗
Google科学家最新整理，给新手推荐的十篇优秀数据科学文章
作为数据科学的初学者，一些好的文章能够快速带我们入门这一充满了未知和挑战的领域。近日，google 决策智库的主管 Cassie Kozyrkov 整理了十篇给学生们的优秀文章。下面这些文章几乎都来自于相同的博客。让我们来看看是哪些文章吧~

2019-08-20 09:09:50

数据科学数据分析
面试系列：十个海量数据处理方法大总结
本文将简单总结下一些处理海量数据问题的常见方法。当然这些方法可能并不能完全覆盖所有的问题，但是这样的一些方法也基本可以处理绝大多数遇到的问题。下面的一些问题基本直接来源于公司的面试笔试题目，方法不一定最优，如果你有更好的处理方法，欢迎讨论。

2019-08-19 18:42:43

大数据海量数据堆
大数据应用尚需打通采集与规范间的藩篱
数字技术是行业、机构发展的战略制高点。达沃斯发布报告显示，全球企业在数字化转型中投入超万亿美元，仅1%达到或超过预期。医疗行业的数字化程度更是远远落后于其他行业，埃森哲(Accenture)认为其尚不足交通等行业的20%。

2019-08-19 18:08:43

大数据医疗大数据梁志刚
企业数据是如何“养成”的？
如今，数据仍在以爆发的态势不断增长，并且充当着企业数字化转型的核心驱动力，成为商业模式创新的重要基础。然而，据统计，目前只有20%的数据得到了挖掘和利用，还有剩余80%的绝大多数数据由于不能被访问、不能被信任、或是不能被分析，价值无法释放，也无法被充分应用。

2019-08-19 18:01:26

企业数据数据分析数据源
如何跨历史数据和实时数据进行实时分析？
当下的数据分析需求给现有的数据基础设施带来了前所未有的压力。跨操作和存储数据执行实时分析通常是成功的关键，但这些操作实现起来却充满挑战。

2019-08-19 14:24:39

数据分析Spark操作
大数据时代，如何避免陷入“算法崇拜”？
要防止陷入"算法崇拜"，还需从源头上了解算法的前世今生，而算法是和数据紧密联系，算法源于大量数据的产生和沉淀，为了让数据具备可追溯和可归纳，同时让数据具备商业化价值，各种各样的算法产生了。

2019-08-19 09:35:22

大数据数据算法算法崇拜
数据科学简化：统计学习的关键概念
在本文中，我将深入探讨数据科学中的统计学习概念。首先，我将定义什么是统计学习。然后，我们将深入研究统计学习中的关键概念。

2019-08-19 09:31:47

数据机器学习统计学习
从韩国的大数据之殇，看技术的产业价值与功能价值
韩国在大数据行业上的案例是极具参考价值的。在一个企业发展和法规发展都极为完善的情况下，确实会损失技术的产业价值。现如今美国闹的沸沸扬扬的科技巨头拆分，实际也有对这类情况的应对。

2019-08-19 09:09:19

韩国大数据互联网
深度解析 Flink 是如何管理好内存的？
在这篇文章中，我们将讨论 Apache Flink 如何管理内存，讨论其自定义序列化与反序列化机制，以及它是如何操作二进制数据的。

2019-08-19 08:01:50

Flink数据管理内存
真正的大数据问题以及为什么只有机器学习才能解决它
为什么很多公司仍在努力构建从采集数据到获得洞察力的平稳运行的管道?他们希望投资和采用机器学习算法来分析数据，并做出商业预测。

2019-08-16 10:38:23

大数据机器学习算法
民生银行数据中台体系的构建与实践
在大数据、人工智能、区块链等新兴技术的驱动下，各家银行纷纷利用新技术制定数字转型改革战略，寻找差异化经营的可行模式。

2019-08-16 10:04:40

民生银行数据中台数据体系
缺失数据别怕！这里有份强大的初学者指南
根据很多专业人士的经验，对数据清理涉及的过程有充分的认知总是好的。了解流程、流程的重要性以及流程中可使用的技巧，将减少执行数据清理任务所需的时间。

2019-08-16 09:20:39

数据清理数据集分析数据
云数据管理会成为DataOps的未来吗?
有专业人士预测，到2020年，云投资将超过1430亿美元。尽管，很多500强企业在过去不愿涉足数字化转型领域;但近年来，他们的态度发生了根本性的转变。数字化转型已经不只是一个“口号”，更像是一个引擎，让企业真正获得了大数据的能力。

2019-08-15 23:24:23

云大数据企业
从全球大数据市场看未来发展趋势
预测未来几年，全球大数据储量规模也都会保持40%左右的增长率。在数据储量不断增长和应用驱动创新的推动下，大数据产业将会不断丰富商业模式，构建出多层多样的市场格局，具有广阔的发展空间。

2019-08-15 22:55:39

大数据数据圏数据产生量
我国大数据产业发展前景广阔，物联网将成为主要驱动力
通过研究发现，本轮大数据发展的主要驱动力是互联网的快速普及，但是随着移动终端市场的渗透率逐渐饱和，我国互联网市场规模增速明显放缓，物联网将成为下一轮数据爆炸式增长的主要来源，并且会极大提高我国数据信息的价值密度。

2019-08-15 09:15:07

大数据物联网互联网
企业可以不要大数据，但必须要有“数据中台”
数据中台绝对不等于数据平台，差别之一就在于是否具有业务属性，这也是数据中台出现的一个非常重要的原因，它可以支撑多个前台业务，使得数据不再是各前端业务独立管理，真正实现不同业务之间的互通互融。

2019-08-14 22:12:09

数据中台数据平台数据库
大数据核心框架MapReduce过程解析
首先MapReduce很明显是分为Map阶段和Reduce阶段。两个阶段分别做什么呢?小编自己画了个图，大家共勉一下，请看正文。

2019-08-14 17:13:23

大数据MapReduce框架
大数据时代的用户数据隐私保护
近年来，用户信息安全问题是公众关切的焦点议题之一。个人信息与数据保护作为互联网治理体系的组成部分，也是构建良好互联网秩序的重中之重。

2019-08-14 16:08:43

大数据安全互联网
数据科学家与数据分析师的三个区别
数据科学家和数据分析师有相同的目标:通过解释信息提供关键业务决策和趋势。但这些也为他们的角色带来了不同的技能、教育和经验水平要求，并且影响了他们的需求和薪酬。

2019-08-13 21:44:46

数据科学家数据分析师数据
大数据和物联网都是什么的情况
无可否认，科技从根本上改变了我们今天的生活方式。与我们的祖先相比，如今的日常工作中使用了大量先进的技术。

2019-08-13 15:46:34

物联网大数据技术
常见数据结构和Javascript实现总结
做前端的同学不少都是自学成才或者半路出家，计算机基础的知识比较薄弱，尤其是数据结构和算法这块，所以今天整理了一下常见的数据结构和对应的Javascript的实现，希望能帮助大家完善这方面的知识体系。

2019-08-13 09:40:55

数据结构算法JavasCript
数据科学和分析的热门市场
近年来，数据分析、集成、可视化的价值日益重要，许多企业最近在数据分析领域的收购也凸显了这一点。企业的首席信息官应优先考虑团队教育、现代工具集和流程，以利用数据分析市场的所有变化。

2019-08-12 10:32:30

大数据数据科学云计算
Hadoop是什么，能干什么，怎么使用
Hadoop是由java语言编写的，在分布式服务器集群上存储海量数据并运行分布式分析应用的开源框架，其核心部件是HDFS与MapReduce。

2019-08-09 16:01:18

Hadoop数据库
上一页 1 ··· 7980818283 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服