51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术25年5月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9071内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9071 条
基于Python语言的大数据搜索引擎
搜索是大数据领域里常见的需求。Splunk和ELK分别是该领域在非开源和开源领域里的领导者。本文利用很少的Python代码实现了一个基本的数据搜索功能，试图让大家理解大数据搜索的基本原理。

2019-07-10 13:17:07

大数据搜索代码
什么是城市大数据？大数据如何应用在智慧城市中？
城市大数据是指城市运转过程中产生或获得的数据，及其与信息采集、处理、利用、交流能力有关的活动要素构成的有机系统，是国民经济和社会发展的重要战略资源。用简单、易于理解的公式可以表达为：城市大数据=城市数据+大数据技术+城市职能。

2019-07-10 13:02:12

大数据智慧城市数据安全
大数据资料之常见的Hadoop十大应用误解学习
大数据之常见的Hadoop十大应用误解常见的Hadoop十大应用误解。Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。以下是常见的Hadoop十大应用误解和正解。

2019-07-10 09:21:36

大数据数据库Hadoop
这五种统计学概念，扫清数据科学之路“拦路虎”
统计学中最基本的部分通常是数据科学中最实用的部分。今天，本文将概述5种有助于数据科学研究的统计学概念。

2019-07-09 14:27:43

数据科学统计学数据集
大数据时代对存储发展有哪些新要求？
伴随着安防大数据时代的来临，安防行业原有的存储技术已经无法满足行业发展新需求，尤其是公共安全视频监控建设联网应用工作对数据联网共享提出了更高的要求，同时以“实战”为根本的公安业务中，大数据深度挖掘极度依赖数据存储系统对非结构化数据分析再处理。

2019-07-08 16:28:50

大数据存储系统
只知道Pandas吗？数据科学家不能错过的24个Python库（上）
最近，Analytics Vidhya总结了24个数据科学家不能错过的24个Python库，也是很不错的一份list，我们一起来看看。也算是入门同学的一个学习和选择的方向。

2019-07-08 16:18:56

PandasPyhton库数据处理
在Fedora上搭建Jupyter和数据科学环境
在这篇文章中你会学习如何将 Fedora 系统打造成数据科学家的开发环境和生产系统。其中大多数基本软件都有 RPM 软件包，但是最先进的组件目前只能通过 Python 的 pip 工具安装。

2019-07-08 15:38:56

FedoraJupyter数据科学家
刑事司法系统中大数据的双刃剑
刑事司法系统中的大数据正在改变处理过程的方式。以下这些变化的发生方式。

2019-07-08 15:38:22

大数据系统存储
20个Excel操作技巧，提高你的数据分析效率
EXCEL凭借其功能强大的函数、可视化图表、以及整齐排列的电子表格功能，使你能够快速而深入的洞察到数据不轻易为人所知的一面。今天DataHunter数猎哥就给大家分享20个Excel操作小技巧，提高你的数据分析效率。

2019-07-08 14:45:17

Excel数据分析数据处理
三大安全隐患，不得不防的企业数据问题
随着数字技术与工作生活的逐步交汇、融合，数据开始呈现指数级爆发，海量复杂的数据信息成为了当代信息化发展的一大标志。数据信息的进一步发展让大数据已然成为推动经济繁荣、改善社会生活的关键引擎。

2019-07-08 11:34:19

大数据技术数据安全
大数据时代如何安全使用WiFi?
伴随着“互联网+”、“数字经济”“工业互联网“、”智能制造“”互联网转型“等关键词的提出，互联网和大数据在各行各业中得到广泛应用，互联网的快递发展对经济、金融、消费习惯、思维习惯等等都带来了很大的影响和转变。

2019-07-05 16:40:22

大数据信息安全网络安全
为什么这么多数据科学家选择辞职
考虑到数据科学领域有大量高技能的人专门去解决复杂的问题(是的，“专门去”是一件积极的事情)，这份工作有很多值得热爱的地方。但事实是，正如英国《金融时报》这篇文章所述，数据科学家通常“每周花1-2小时寻找新工作”。

2019-07-05 15:52:03

数据科学家大数据机器学习
大数据流处理：Flume、Kafka和NiFi对比
在构建大数据流水线时，我们需要考虑处理数据的数量，种类和速度，这些数据通常出现在Hadoop生态系统的入口。

2019-07-05 12:16:26

大数据IT互联网
数据科学家需要的基本技能
数据科学家是当今科技组织中比较受追捧的角色之一，并且薪酬不断上涨。在一些IT组织中，首席信息官可能只有雇用一名数据科学家的预算。所以在招聘数据科学家的时候，可能会希望他像摇滚明星多才多艺，令人关注。

2019-07-05 10:29:17

大数据数据科学家
一文带你了解什么是数据挖掘
大数据时代已经来临，利用网络和生活中产生的大量数据发现问题并创造价值，使得数据挖掘成了一门新的学科和技术。那么什么是大数据挖掘，数据挖掘的过程是什么，以及它的具体算法又有哪些?今天这篇文章，将带你一起了解数据挖掘的那些事儿。

2019-07-04 15:16:52

数据挖掘大数据算法
从单体到Flink：一文读懂数据架构的演变
大数据技术的兴起，让企业能够更加灵活高效地使用自己的业务数据，从数据中提取出更多重要的价值，并将数据分析和挖掘出来的结果应用在企业的决策、营销、管理等应用领域。但不可避免的是，随着越来越多新技术的引入与使用，企业内部一套大数据管理平台可能会借助众多开源技术组件实现。

2019-07-04 15:16:42

数据架构Flink数据仓库
大数据是什么？多大的数据叫大数据？
很多没有接触过大数据的人，都很难清楚地知道，究竟多大的数据量才可以称之为大数据。那么，根据数据收集的端口，企业端与个人端之间，大数据的数量级别是不同的。

2019-07-04 14:22:56

大数据数据挖掘数量级
未来智能城市的成败取决于大数据
在开发未来的智能城市时，大数据可以发挥重要作用。人们需要了解大数据及其重要性。

2019-07-04 11:56:17

大数据智慧城市开发
这七家BAT公司，谁家数据科学家更多
Diffbot研究了来自其人工智能)数据库的数据。该数据库收集了互联网上所有的公共知识，以确定有多少员工拥有与大数据工作相关的职位，以及哪些公司聘用了最多与数据工作相关的职位。

2019-07-03 16:10:27

数据科学家数据库数据工程师
数据科学家应该知道的5个统计学知识
今天，我们将分享5个对于数据科学有用的统计学方法。这些不是过分抽象的概念，而是相当简单、有长期适用性的技术。

2019-07-03 15:21:47

数据科学统计数据数据结构
做机器学习项目数据不够？这里有5个不错的解决办法
数据稀缺的问题非常重要，因为数据是任何AI项目的核心，数据集的大小往往是影响项目表现优劣的一个重要因素。大多数情况下，与数据相关的问题，往往都是无法做出优秀人工智能项目的主要原因。

2019-07-03 15:16:56

机器学习数据项目
人力资源管理需要结合大数据和直觉
一些大数据专家对数据分析软件的洞察力如何与人力资源管理者的智慧相结合进行了探讨。那么在企业经营业务时，将会更信任什么：大数据还是自己的直觉?

2019-07-03 10:57:03

大数据人力资源软件
协助企业提升大数据应用的六大平台 译文
应运而生的大数据分析平台，恰好能够使用算法协议来检查大量的数据，并将其分解为相互关联、且富有洞见的信息。由它们所提供的各种直接方案，能够有效地推动企业在战略和战术层面做出各种明智的决策。下面我向您介绍六种可以协助企业提升大数据应用，并能捕捉到大数据真实价值的各种大数据和机器学习平台。

2019-07-02 09:23:55

大数据数据分析机器学习
大数据架构如何做到流批一体？
大数据分析场景需要解决哪些技术挑战?目前，有哪些主流大数据架构模式及其发展?今天，我们都会一一解读，并介绍如何结合云上存储、计算组件，实现更优的通用大数据架构模式，以及该模式可以涵盖的典型数据处理场景。

2019-07-01 15:40:53

大数据架构流处理
科学家无法涉足的“黑暗世界”，被雪藏的军用数据等待新生
没有人比军队更密切地监视着地球，而这些搭载着人类最先进技术的军事装备，它们采集的海量数据究竟去哪了?

2019-07-01 14:15:59

数据数据分析军队
以大数据技术为基础的4个游戏应用
如今，基于大数据技术的游戏应用程序为游戏行业带来了全新的进步。大数据是游戏的未来。Dataiku公司的Pierre Gutierrez在他的文章中对数据分析在游戏中的作用进行了一次引人注目的分析，即大量的游戏分析数据没有尽头。

2019-07-01 10:11:18

大数据技术软件
用大数据填报高考志愿，靠谱吗？
近日，各地高考分数线陆续公布，志愿填报成了考生和家长们的头等大事，大数据填报高考志愿也火了起来。

2019-06-28 15:54:49

大数据
燃爆！17行Python代码做情感分析？你也可以的
17行代码跑最新NLP模型？你也可以！一台可以上网的电脑，基本的python代码阅读能力，用于修改几个模型参数，对百度中文NLP最新成果的浓烈兴趣。

2019-06-28 12:34:34

Python情感分析NLP
这四款大数据可视化工具不得不看
大数据可视化是进行各种大数据分析解决的最重要组成部分之一。 一旦原始数据流被以图像形式表示时，以此做决策就变得容易多了。 为了满足并超越客户的期望，大数据可视化工具应该具备这些特征。

2019-06-27 16:28:39

数据可视化JupyterGoogle Char
大数据平台常见开源工具集锦，看看你都知道哪些
本文整理了大数据平台常见的一些开源工具，并且依据其主要功能进行分类，以便大数据学习者及应用者快速查找和参考。

2019-06-27 15:54:44

大数据工具开源
大数据计算框架Spark之内存模型
Executor 端的内存模型,包括堆内内存(On-heap Memory)和堆外内存(Off-heap Memory)。

2019-06-27 11:18:00

Spark内存大数据
一文看懂怎么用Python做数据分析
常遇到两类朋友。一类是会爬虫但不知道如何进一步做数据分析的，一类是平常用 Excel 做分析但不太会用 Python 分析的。如果和你很像，那下面这篇系统长文会很适合你，建议先收藏。

2019-06-26 11:10:47

Python数据分析Excel
大数据的一个时代的结束了，Hadoop还值得你学习吗？
Hadoop从诞生至今已经十三年了。2006年诞生大数据，2008年成为Apache的顶尖项目，成为国内外互联网大数据的标准配置之一。长久以来，想要入行大数据开发Hadoop也是必学。最近确对Hadoop哀声一片，更多喊得是拥抱云计算，摒弃Hadoop。

2019-06-26 11:05:35

大数据Hadoop云
能够简化数据科学的6种工具
数据科学家过去常常需要绞尽脑汁，因为80%的工作都是通过用Python，Java或他们喜欢的语言来制作自定义例程并准备分析数据的，所以R或SASS中那些复杂的统计工具都可以完成它们的工作。而现在市场上充斥着各种复杂的工具，它们将数百个经过良好设计的例程捆绑到了一个包中，以便为你完成大量重复且令人不快的数据清理和标准化工作。

2019-06-26 10:34:05

数据科学工具数据集
三行Python代码，可以让你的数据处理快别人4倍
Python是一门非常适合处理数据和自动化完成重复性工作的编程语言，我们在用数据训练机器学习模型之前，通常都需要对数据进行预处理，而Python就非常适合完成这项工作，比如需要重新调整几十万张图像的尺寸，用Python没问题！

2019-06-26 08:37:23

Python数据处理编程语言
Hadoop 气数已尽？
从本质上讲，市场上只剩下一个主要的 Hadoop 服务商 Cloudera。如果我告诉你 Cloudera 很久以前就不是主要搞 Hadoop 的呢?

2019-06-25 11:03:20

HadoopGoogleSpark
数读 | 中国哪里的地铁很拥挤
打开北京、上海与广州的地铁地图，你会看见三张纵横交错的线路网络，这代表了中国最成熟的三套城市轨道交通系统。可即使这样，在北上广生活的人依然少不了对地铁的抱怨，其中谈及最多的问题便是拥挤——对很多人而言，每次挤地铁的过程，都像是一场硬仗。更何况，还都是败仗居多。

2019-06-24 15:55:59

地铁线路拥挤
如何利用大数据更好地促进SEO优化服务
托管服务提供商可以利用大数据为企业提供更好的服务和更多的SEO优势。大数据如今已经成为很多企业数字营销战略中的重要组成部分。

2019-06-24 15:11:00

大数据SEO优化搜索引擎
工业制造中的大数据分析
搞清楚工业大数据分析，第一步我们应该如何定义制造业的大数据?这里我和大家通过大数据的三个特性，来经一步了解大数据的特性。

2019-06-23 15:53:48

工业大数据数据分析制造
Python中常用的可视化工具 Matplotlib 简单入门
Matplotlib是约翰·亨特(John Hunter，1968-2012)的心血结晶，他和许多贡献者一起投入了不可估量的时间和精力来制作一套全球数千名科学家使用的软件。

2019-06-23 15:44:24

Matplotlib可视化图表
Hadoop之父：普通程序员到顶级公司CTO的进阶之路
做大数据开发的朋友一定用过 Hadoop 这个工具，它是一款支持数据密集型的分布式应用程序。那么接下来就跟鸡仔一起来了解被誉为 Hadoop 之父的 Doug Cutting，他到底是何许人也？又有哪些值得我们学习的地方呢？

2019-06-21 14:25:07

HadoopCTO数据库
基于Spark的数据分析实践
本文主要分析了 Spark RDD 以及 RDD 作为开发的不足之处，介绍了 SparkSQL 对已有的常见数据系统的操作方法，以及重点介绍了普元在众多数据开发项目中总结的基于 SparkSQL Flow 开发框架。

2019-06-19 16:01:14

Spark数据分析SparkSQL
2019中国大数据产业布局及发展趋势预测
数据显示，2017年中国大数据产业规模达到4700亿元，同比增长30%;其中，大数据硬件产业的产值为234亿元，同比增长39%。2018年我国大数据产业规模突破6000亿元;随着大数据在各行业的融合应用不断深化，预计2019年中国大数据市场产值将达到7150亿元。

2019-06-19 15:38:59

大数据互联网王新哲
制造业企业中台建设思考与实践
“忽如一夜春风来，千树万树梨花开”，中台的概念就如这句诗所描述得一样一瞬间在IT圈里火了起来，好像不讨论中台就任何解决方案就黯然失色了。中台(数据中台、业务中台、技术中台、AI中台……)的概念可谓漫天飞舞，我希望在下面的文章中结合真实的实践案例，就大家最关心的问题从概念到实践层面做一些解读。

2019-06-19 11:11:21

企业中台实践
打破机器学习中的小数据集诅咒
在这篇文章中，我们看到数据的大小可能会体现出泛化、数据不平衡以及难以达到全局最优等问题。

2019-06-19 09:13:29

机器学习中数据集深度学习
万亿数据下 Hadoop 的核心竞争力
在大数据时代，Hadoop 有着得天独厚的优势。然而，每个企业的技术储备和需求特点不同，他们希望从海量的客户数据中挖掘真正的商业价值，像 Google 、Facebook 、Twitter 等这样的企业更是 Hadoop 的最早获益者。那么，今天我们就来聊一聊，万亿数据下 Hadoop 的核心竞争力。

2019-06-18 14:12:07

Hadoop大数据数据库
大数据流处理如何帮助世界新兴市场
随着当今技术的发展，对流处理的需求也越来越大。例如，必须快速处理数据，以便企业能够实时跟上不断变化的业务和市场状况。这就是实时流处理进入图片的地方，它可能会改变人们所知道的关于大数据的一切。

2019-06-18 13:51:08

大数据流处理新兴市场
大数据告诉你80、90后的真实负债
近期，一篇“90后超一半网贷”的文章引起了网络热议。看似90后的收入无法支撑他们的超前消费，然而，20多岁的90后真的比奔四的80后负债更多吗?

2019-06-18 10:05:55

大数据80后90后
我是AI机器人何夕2号，想听听我的故事吗？
如果你不想错过AI时代，没事多去AI·X逛逛，那里是AI爱好者和从业者最能爆发奇迹的交流成长平台。

2019-06-18 08:59:45

AI机器学习
大数据与机器学习将如何改变全球能源行业？
随着AI技术战争的不断升温，企业与消费者也将受益于更加安全、更加清洁、更加便宜以及更加高效的能源。而让这场技术竞赛也才刚刚开始。

2019-06-17 14:41:15

机器学习人工智能 大数据
上一页 1 ··· 8182838485 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服