51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术24年11月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9063内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9063 条
如何用机器学习模型，为十几亿数据预测性别
基于用户画像进行广告投放，是优化投放效果、实现精准营销的基础;而人口属性中的性别、年龄等标签，又是用户画像中的基础信息。那该如何尽量准确的为数据打上这些标签?

2020-05-26 18:50:49

机器学习数据预测标签
大数据分析：学习工具Hadoop，基本安装指导
Hadoop版本主要分为原生Apache Hadoop版和Hadoop商业发行版两种，而其中商业发行版Hadoop多为原生Apache Hadoop的集群模式下的优化版，除少数社区版外，商业发行版大多需要付费使用，且对于初学者而言使用难度较大，因此本教程主要采用Apache Hadoop进行安装与使用方面教学。

2020-05-26 16:25:33

Hadoop下载安装
Spark：安装及环境配置指南
本文主要介绍一下spark的安装及环境配置。下载时需要注意的是在第1步选择完spark版本之后的第2步“choose a package type ”时，spark与hadoop版本必须配合使用。

2020-05-26 15:05:30

Spark安装环境
成功数据可视化和讲故事的4个特性
数据的妙处在于它可以用来证明一切，但你的数据故事是否足够吸引人呢?尽管数据质量和模型准确性等技术问题很重要，但在某些时候你还需要解释数据的含义。

2020-05-26 14:58:56

数据可视化数据数据故事
Python数据可视化：WordCloud入门
WordCloud是一种很好的展现数据的方式，网上也有不少小工具和在线网页。但是有些不支持中文，有些安装复杂，所以决定用Python实现。主要参考官网，通过官网的例子，讲一下WordCloud的制作。

2020-05-26 11:34:46

可视化图WordCloud
2020年的优秀数据分析趋势
除了人工智能技术得到广泛应用之外，在过去几年中，大数据也取得了更具意义的发展。调查表明，2020年全球大数据行业的市场规模为1,890亿美元。考虑到市场增长，可以预计到2022年将达到2470亿美元。

2020-05-26 10:56:49

数据分析大数据数据
彰显自然语言处理商业价值的5个成功案例
这五个组织使用了自然语言处理(NLP)来更好地服务他们的客户，自动化重复的任务，并简化运营。

2020-05-25 09:41:36

大数据自然语言处理数据分析
大数据在金融业中的重要作用，以客户为中心的特权增强产品多样性
金融业一直是竞争激烈的行业。考虑到像大数据这样的破坏性技术如何成熟，大数据可以成为金融业的有益组成部分。企业可以收集大数据来进行安全性，个性化和投资决策。

2020-05-25 09:32:50

大数据金融技术
玩转可视化｜这里有一些小技巧
数据可视化实际上就是为了更好的传达信息，透过繁杂的数据通过图表等方式清晰，有效的传达信息，且还要注意采用的表达方式不会分散用户的注意。

2020-05-22 13:32:24

可视化词云图数据
物联网与大数据将改变我们与城市互动的方式
作为设计师，我们所有人都想创造有利于最终用户的场所。借助新兴技术，我们现在可以将数字化工作方式嵌入我们周围的世界。

2020-05-21 14:25:10

物联网大数据IOT
分页显示大数据，原来方法这么多，快来学几个
有没有像网页预览那样，一个页面只显示固定条数，可以翻页呢?--雨夜又遇到问题了。别着急，我给你来三个方法，搞定这个事情，从简单公式，到代码到数据库语言SQL方法，今天全部给你分析一遍

2020-05-20 16:54:47

数据分页显示函数
来看看基于Kubernetes的Spark部署完全指南
本文是在Kubernets上搭建Spark集群的操作指南，同时提供了Spark测试任务及相关的测试数据，通过阅读本文，你可以实践从制作Spark镜像、搭建Spark容器集群，到在集群上运行测试任务的完整流程。

2020-05-20 13:20:45

KubernetesSpark数据
未卜先知，现代化数据仓库带来强大商业智能
在当前这个数据爆炸的时代，企业数字化程度越高，越会重视数据仓库的应用。对数据仓库的数据进行多维度分析，在看似杂乱无章的数据中寻找规律、预测趋势，从而未卜先知，做出正确的商业决策。现代化数据仓库的应用不仅可以提高企业的决策能力、洞察发现力和流程优化能力，同时还有助于发掘新商机，加快业务发展步伐。

2020-05-20 10:33:48

Cloudera商业智能数据仓库
别再用Pandas处理大数据了！现在你拥有更好的选择
众所周知，Pandas是最好的探索性数据分析工具之一。但它并非对于每个工作来说都是最佳选择，大数据处理就与它“气场不合”。

2020-05-19 17:09:33

Pandas大数据数据分析
Spark：大数据产品的一种测试方法与实现
Spark作为现在主流的分布式计算框架，已经融入到了很多的产品中作为ETL的解决方案。 而我们如果想要去测试这样的产品就要对分布式计算的原理有个清晰的认知并且也要熟悉分布式计算框架的使用来针对各种ETL场景设计不同的测试数据。

2020-05-19 17:07:09

Spark测试数据计算
分析成熟度模型：阻碍数据科学团队发展的“罪魁祸首”
下面这种模型你肯定见过，高德纳优势分析模型在数据分析和数据科学会议上实在是太常见了。

2020-05-19 13:54:02

成熟度模型数据科学数据分析
智能+，见未来：「易观方舟智能用户运营产品套件」全新升级
2020年5月18日，数据智能产品、平台和解决方案提供商易观，在线上举办“「易观方舟智能用户运营产品套件」全新升级发布会”。全新升级后的易观方舟包含智能分析、智能运营、智能画像三大核心组件，拥有“更灵活、更高效、更开放、更安全”的特性，帮助企业决胜“数据智能+用户运营”，留住下一个用户战场。发布会同时推出了“零成本”获得易观方舟智能用户运营解决方案，包含了智能分析、智能运营两大组件免费版本及技术服务。

2020-05-18 17:39:29

易观方舟数据智能
企业能利用大数据算法建立有效链接吗?
大数据对于人们来说似乎是一个巨大的概念。但是，很多企业已经在其业务中使用大数据，这可能会让人感到惊讶。分析工具和软件实际上使用大数据来收集编译的统计数据和分析的指标。

2020-05-18 11:14:11

大数据工具技术
避免数据分析灾难发生的6个技巧
考虑到数据分析在推动业务价值方面的前景，它现在依旧是优秀的IT投资之一也就不足为奇了--但这还远不能确保成功。

2020-05-18 09:56:46

数据分析数据管理数据
大数据是否将我们拖到另一个AI冬天？
过去几年中，令人屏息的新闻剪辑数量令人难以记住，但人工智能的历史充满了挫折和挫折。 记忆犹新的人们记得70年代初和80年代的第一对所谓的" AI冬季"。

2020-05-17 14:52:22

大数据人工智能技术
Python：我的交易行为终于在分析1225万条淘宝数据，搞清楚了
本文使用的数据集包含了2014.11.18到2014.12.18之间，淘宝App移动端一个月内的用户行为数据。该数据有12256906天记录，共6列数据。

2020-05-16 13:25:03

分析网购数据
Excel还不会数据清洗？这四大类函数推荐你哦
Excel作为数据分析极好用的工具之一，今天就来说说Excel中那些数据清洗类函数。

2020-05-16 12:20:40

Excel数据清洗函数
快速完成数据分析的好帮手——豌豆BI
豌豆BI是一个敏捷数据分析平台产品，主要特征是简单易上手，非技术人员能快速、自助的完成数据分析及展现。

2020-05-15 17:18:40

豌豆BI数据分析
Tableau 2020.2提供新的多源分析数据模型和KPI监测指标功能
日前，Tableau Software宣布正式发布Tableau 2020.2，提供全新的数据模型，简化复杂的数据分析，无需编码或脚本语言技能。

2020-05-15 16:59:41

Tableau数据分析
一文搞懂PowerBI的数据建模
数据建模并没有那么高深，你同样可以学会！这篇文章通过一个实例创建一个简单的数据建模，并引出两个重要的概念：度量值和DAX. 之前谈论PowerBI与Power Pivot的关系时就提到，Power BI数据建模其实就相当于Excel的Power Pivot插件，不过这个插件已内嵌到PowerBI Desktop中了，两者的功能基本相同。Pivot是透视的意思，那么PBI的数据建模也和透视有许多共通之处。

2020-05-15 16:37:13

PowerBI数据分析
数据分析中SAS有什么优势
数据分析中应用的分析软件有很多，例如SPSS、SAS等等。那么，SAS在数据分析中有哪些优势呢？

2020-05-15 15:51:04

SAS数据分析
一文读懂stata的前世今生
Stata作为一款功能强大、用法简单且易于上手的统计软件，不仅统计分析功能全面，而且在数据管理方面的功能也很强大。

2020-05-15 15:29:36

Stata数据分析
世界上最早数据统计分析软件SPSS简介
SPSS是软件英文名称的首字母缩写，原意为Statistical Package for the Social Sciences，即“社会科学统计软件包”。但是随着SPSS产品服务领域的扩大和服务深度的增加，SPSS公司已于2000年正式将英文全称更改为Statistical Product and Service Solutions，意为“统计产品与服务解决方案”，标志着SPSS的战略方向正在做出重大调整。

2020-05-15 15:21:58

SPSS数据分析
典型数据分析软件的简单介绍（MATLAB篇）
Matlab是MathWorks公司于1982年推出的一套高性能的数值计算和可视化软件。

2020-05-15 15:18:25

matlab数据分析
用R做数据分析
R语言简介： R语言是由 Ross Ihaka、Robert Gentleman二位创建的，这也许可以解释为什么叫R语言。现在由“R开发核心团队”负责开发。R是基于S语言的一个GNU项目。

2020-05-15 15:09:51

R语言数据分析
大数据未来发展的七大趋势
在大数据时代，数据挖掘、分析，可以通过方方面面来影响我们的生活，不仅更便利，而且还直接可以提升幸福感。那么，大数据未来的发展趋势有哪些呢?

2020-05-15 14:17:40

大数据AR数字
地图厂商的下一战：AI大战
时代在变化，技术在精进，用户需求不断变化，新基建下的互联网地图行业会给用户带来惊喜，这也是地图商们破局的机遇。

2020-05-15 10:52:41

大数据人工智能技术
工信部：加快工业大数据产业发展
昨日，工信部发布了关于工业大数据发展的指导意见。工信部要求，要按照高质量发展要求，促进工业数据汇聚共享、深化数据融合创新、提升数据治理能力、加强数据安全管理，着力打造资源富集、应用繁荣、产业进步、治理有序的工业大数据生态体系。

2020-05-15 09:56:37

大数据工业技术
大数据分析及其对供应链的影响
供应链管理者在采用技术方面经常引领市场。如今，从物流到客户偏好的各种数据的不断增长，正在迅速改变企业的经营方式，并凸显出对增强数据管理和分析的强大需求。大数据分析（指大型和复杂的数据集）的好处是显而易见的。

2020-05-15 09:49:16

大数据分析供应链大数据
一行脚本，几TB的数据没有了......
前几天看到《成人网站泄露 108 亿数据，内含 50 万中国用户 》的文章，因为数据是基于 Elasticsearch 存储的，出于好奇，查了一些国外的报道，才有了这篇文章的思考。

2020-05-15 09:32:50

TB数据Elasticsear
4个简单技巧，可提高您的Apache Spark工作性能
在开发Spark应用程序时，最耗时的部分之一是优化。 在此博客文章中，我将提供一些性能提示，以及(至少对我而言)启动时可能会使用的未知配置参数。

2020-05-15 07:59:34

Apache Spar应用程序代码
阿里云自研技术拿下世界第一 云原生数据仓库AnalyticDB登顶TPC-DS
由于传统数据库厂商对分布式和并行能力的支持欠佳，该榜单自2006年公布以来，还没有一家传统数据库厂商能通过测试，目前也仅有3家企业上榜。

2020-05-14 16:11:20

阿里云
医疗行业正从大数据中汲取回报的六个途径
大数据每天都在增长，这让医生们有机会了解更多有关科学、客户服务、服务等方面的知识。下面就是医疗行业从大数据中受益的几种主要方式，也许能给你的业务或者实践带来一些帮助和启发。

2020-05-14 15:15:26

医生大数据患者
MySQL如何实现Excel分组排序功能？
Excel中分组排序只需要对数据进行升序降序，再利用if函数添加排序序号，即可筛选出分组top数据。

2020-05-14 14:57:48

MySQLExcel排序
HDFS原理 | 一文读懂HDFS架构与设计
HDFS(Hadoop Distributed File System)是我们熟知的Hadoop分布式文件系统，是一个高容错的系统，能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。

2020-05-14 14:52:05

HDFS数据集架构
大数据时代，且看新一代计算引擎Spark和Flink成王败寇
做大数据绝对躲不过的一个热门话题就是实时流计算，而提到实时流计算，就不得不提 Spark 和 Flink。本文对 Spark 和 Flink 进行了全面分析与对比，且看下一代大数据计算引擎之争，谁主沉浮?

2020-05-14 13:40:40

SparkFlink大数据
医疗行业正从大数据中汲取回报的六个途径
科技总是源源不断地改变着世界，人工智能和大数据正在结合起来，为人们提供各种好处，其中应用比较广泛的可能要数医疗行业了。

2020-05-14 13:38:32

大数据医疗人工智能
工信部印发指导意见 加快工业大数据产业发展
5月13日，工信部印发加快工业大数据产业发展指导意见(以下简称意见)。意见指出工业大数据是工业领域产品和服务全生命周期数据的总称，包括工业企业在研发设计、生产制造、经营管理、运维服务等环节中生成和使用的数据，以及工业互联网平台中的数据等。

2020-05-14 11:15:00

工信部大数据产业工业数据
使用Kafka和Druid了解Spark流
在本博文中，我将分享通过将Spark Streaming，Kafka和Apache Druid结合在一起以构建实时分析仪表板，以确保精确的数据表示而获得的知识。

2020-05-14 10:26:27

KafkaSpark数据
实战｜Python数据分析可视化并打包
大家好，关于Python数据分析的工具我们已经讲了很多了，相信一直关注的读者对于Pandas、NumPy、Matplotlib的各种操作一定不陌生，今天我们就用一份简单的数据来学习如何使用Python进行数据分析。

2020-05-14 10:19:23

Python可视化分析
如何认识大数据对企业融资的影响
大数据对企业融资的影响非常明显，值得跟踪和研究。人们应该了解关其工作原理的更多信息。

2020-05-14 10:07:12

大数据企业融资大数据应用
你知道Kafka和Redis的各自优缺点吗？一文带你优化选择
大数据技术相辅相成，没有任何一种技术是没有缺点，孤立发展的。今天咱们来分析下Kafka和Redis的对比，看分布式发布订阅都有什么各自的优势与缺点。

2020-05-13 17:12:21

大数据分布式引擎
Python数据分析：探索性分析
Excel里可以用【数据分析】功能里的【描述统计】功能来查看数据集常用的统计指标，但这里只能是对数值型的数据进行统计。

2020-05-13 11:32:28

数据分析数值分析
加强大数据时代个人信息保护
个人信息保护涉及主体广，不仅需要立法、司法、行政监管方面发力，更需要企业、个人等相关主体从各自角度出发，在职责定位、认知自律等方面协同发力，共同完善个人信息保护机制。

2020-05-13 10:03:06

大数据安全信息泄露
10W阅读，万人点赞，这套大数据平台建设方法论，到底有什么干货
在数据平台建设的前期来说，做大数据平都是为了日后的数据分析来做基础的。那样就一定要规划出适合企业的方案。

2020-05-13 09:42:49

大数据平台方法论
上一页 1 ··· 6768697071 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服