鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 25年5月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

大数据

9088内容

关注

大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。

文章博文帖子课程

共 9088 条

聊聊流计算的两个数据处理引擎：Spark 和 Flink

谈到大数据，流计算的重要性和它实时支持的强大分析是不可回避的。说到流计算，也离不开该领域最强大的两个数据处理引擎：Spark 和 Flink。

2022-02-09 15:23:41

大数据流计算 Spark

Github 推出“赞助商专用”仓库，根据赞助金额解锁新功能

随着企业回馈开源作者的呼声，Github推出了新的“赞助商仓库”：这种仓库只有赞助商能访问，开发者可以根据赞助的金额设置赞助等级(最多十个)，每个等级的赞助商享受的功能不一样(类似于游戏的 vip1-vip10?)。

2022-02-09 15:20:39

Github 赞助商仓库开发者

供应链分析：保持物流顺畅的五个技巧

企业如何最好地使用数据分析来增强其供应链管理(SCM)工作?行业专家为此分享了一些最佳实践。

2022-02-09 14:18:58

供应链分析数据分析大数据

手把手教你对抓取的文本进行分词、词频统计、词云可视化和情感分析

内容稍微有点多，大体思路如下，先将csv中的文本取出，之后使用停用词做分词处理，再做词云图，之后做情感分析。

2022-02-09 09:03:42

分词、词频统计可视化

如何分析产品新功能的效果？

我们经常遇到产品需要加一个新功能，当功能上线后，产品经理总会找我们建立指标体系，分析相关产品效果。

2022-02-09 07:31:27

产品功能护栏指标

通向优秀数据分析师的六个阶梯

很多同学都在问：”数据分析从0到1的文章看多了，咋样才能从1到10，从普通到优秀呀！”今天系统地解答一下。“优秀”是一个形容词，只有清晰了参照物，才能知道到底什么是“普通”，什么是“优秀”。今天就从“普通”讲起，想通往“优秀”，需要迈过6个阶梯。

2022-02-08 13:34:22

数据分析师定基线

春节大数据：节前返乡客流增长超40%，带火低线城市“微旅游”

2022年春节，在全国疫情精准防控政策和冬奥会等多重因素支撑下，今年春节旅行消费呈现出多个新趋势新特点。2月6日，同程旅行发布《2022春节假期旅行消费数据报告》（以下简称“报告”），对春节假期期间全国旅行消费市场进行分析盘点。

2022-02-07 22:48:07

大数据春节冬奥会带

数据分析八大模型：同期群模型

今天继续来谈数据分析八大模型系列。今天分享的，是一个原理很简单，但是应用很广泛的模型：同期群模型。在商品分析、用户分析、渠道分析上，都用得着哦。

2022-02-07 19:48:02

模型同期群 LTV模型

数据发现在数据网格架构中的重要性

数据网格中的发现有助于建立数据生产者和消费者之间的平衡，通过以下实践使数据更容易被发现和更可靠。

2022-02-07 18:28:06

数据网格数据发现数据

每个数据分析师都应该了解的六个预测模型

数据分析模型有不同的特点和技术，值得注意的是，大多数高级的模型都基于几个基本原理。

2022-02-07 14:00:27

数据分析模型

大数据和算法是如何把人拉入无尽的娱乐深渊的

今天就想简单地跟大家聊聊智能陷阱这个话题，简单地来说就是网络是如何让你一步步地深陷娱乐而沉迷在其中的原理。以及分析大数据和算法是如何一步步地把人拉入无尽的娱乐深渊的。

2022-02-03 15:27:14

大数据算法网络

零售银行可以使用数据更好地为数字原生服务的五种方式

随着越来越多的服务实现数字化，大数据对银行业变得更加重要。到2026年，分析技术在银行业市场的价值预计将超过54亿美元。

2022-01-24 13:56:58

金融行业数据技术大数据

盘点八个数据分析相关的Python库（实例+代码）

Python中常会用到一些专门的库，如NumPy、SciPy、Pandas和Matplotlib。

2022-01-20 13:56:15

Python 代码数据分析

十个大数据挑战以及应对方法

执行良好的大数据战略可以简化运营成本、缩短上市时间并支持新产品。但是，在将董事会讨论的大数据举措付诸实践的过程中，企业面临着各种大数据挑战。

2022-01-19 12:39:41

数据治理，是不是一道“送命”题？

钱来货往，大数据和人工智能火起来之后，沉淀的数据一下子多了起来，如何管好+如何用好数据，成为大多数企业的难题。数据发挥价值是近10-20年才有的概念，这就带出了数据治理。

2022-01-19 11:39:15

数据治理大数据数据

巨细！一文告诉你数据分析不得不知的秘密！

今天的文章主要讲解数据分析与可视化的相关步骤以及每个步骤需要用到的 Python 库，给正在从事数据分析或者学习数据分析的同学提供工作或者学习思路。

2022-01-18 08:04:37

数据分析 Python

Neo4j 针对2022图数据平台发展的十大预测

作为世界上部署最广泛的图数据平台，Neo4j预见2022年图技术将呈现如下十大发展趋势。

2022-01-17 14:34:59

数据平台数据数字化

2022年你应该知道的十大Python库

学习数据分析绝非易事，有无数种工具和资源可供使用。因此，有时会让我们很难弄清楚该学习什么技能，该使用哪种工具。

2022-01-17 13:26:41

Python 工具数据分析

2022年春运今日正式开启大数据分析出这些新变化

随着春节的日益临近，在外漂泊了一年的“打工人”们也将陆续踏上回家的路途。

2022-01-17 11:21:35

大数据数据分析春运

聊聊我常用的五款动态数据可视化工具

视频当道的时代，数据可视化自然也要动起来。我常用的动态可视化工具主要有Tableau、Echarts、Flourish、Python这几个，另外加上地图可视化神器kepler.gl。

2022-01-17 11:09:46

数据可视化工具开发

四个数据分析思路分享：关键指标与产品如何把握？

本文不再对一些基本的数据定义再做描述，而是从分析的思路总结了一些心得，欢迎各位一起来讨论。

2022-01-14 12:48:07

数据分析关键指标产品

「数仓面试」如何确定主题域？

简单说，一个主题对应一个分析对象。分析对象就是在决策、分析时重点关注的东西，这个东西其实是非常主观的，在不同的企业，或者企业的不同发展时期，所关注的点会不一样，从而影响有些主题可能存在或者不存在。

2022-01-13 10:45:48

数仓对象主题域

“越界”大数据乱象频现，用户个人隐私该如何守护？

细心的手机迷们近年来可能会不时地发现如下情况：在购物平台搜索、浏览多个同类商品后，再次打开该平台，无论是首页推荐还是商品下方推荐页，显示的都是之前浏览过的同类商品；更令人不解的情况是，在使用社交平台和阅读平台时，这些商品如“狗皮膏药”似的在广告位上又出现了！

2022-01-12 23:51:24

大数据隐私安全

2022年数据市场的演变：大数据趋势

大数据有着光明的未来：先进的技术和更轻松的数据访问使企业能够获得更多洞察力、提高绩效、创造收入和更快地创新。

2022-01-12 12:22:57

数据市场大数据数据

数据分析的求职前景，你关心的都在这！

转眼已是2022年初，新的一年又在招手。辞旧迎新，大家总会关心未来前景。今天，我们就系统讲一下，2021年数据分析师前景问题。

2022-01-12 11:58:12

数据分析求职

数据成熟度的演变

随着企业变得更加以数据为导向，数据成熟度将继续发展，同时也认识到监管要求和数据可访问性的限制因素。

2022-01-11 10:52:51

数据成熟度数据数据分析

Flink常见维表Join方案，收藏学习开发很有用！

由于维表是一张不断变化的表(静态表只是动态表的一种特例)。那如何 JOIN 一张不断变化的表呢?如果用传统的 JOIN 语法来表达维表 JOIN，是不完整的。因为维表是一直在更新变化的，如果用这个语法那么关联上的是哪个时刻的维表呢?我们是不知道的，结果是不确定的。

2022-01-11 10:51:29

Flink Join 数据

花了一周时间，终于搭建好了Excel和Python交互数据分析平台

喝了几碗泡面汤，熬了几个夜终于搭建好了，Excel和Python之间数据交互分析环境。后续再一步步完善!

2022-01-11 10:06:28

Python Excel 数据分析

大数据如何提高企业的生产力

调研机构对一些企业进行了调查采访，以了解大数据在他们公司的优先事项。他们表示，采用大数据，最显著的好处之一是提高了工作效率。

2022-01-10 10:45:16

大数据大数据动向数据技术

让大数据算法发挥更多正能量

近日，国家网信办等四部门发布《互联网信息服务算法推荐管理规定》，着眼于大数据算法有序治理，引导互联网行业健康发展，得到各方点赞。当前大数据资源无处不在，大数据早已不再是互联网公司私产，而是涉及用户隐私，关系国家安全，影响社会风气，关乎公平正义的社会公共财产。

2022-01-10 10:19:03

大数据算法技术

2022年的五个主要的数据迁移趋势

数据似乎总是需要迁移，无论是从内部部署设施迁移到云平台，还是从操作系统到长期存档，数据始终在移动。

2022-01-10 09:59:36

数据迁移大数据数据

DataOps是“数据的DevOps”吗？原创

DevOps 一直以来都是转变 IT 工作方式的主要催化剂，它能够使项目变得更加敏捷，使企业能够更快的对客户需求作出响应。

2022-01-10 07:27:04

DataOps 数据驱动

三九严寒到！大数据看“三九”真的是全年最冷吗？

一九二九不出手，三九四九冰上走……明天（1月8日）我们将进入三九的第一天，数九寒天的最冷时段就要到来了。三九真如传闻所说是最冷的时候吗？今年的三九会有多冷？

2022-01-07 23:24:12

大数据气温寒冬

震惊，难道这就是“西安一码通”总崩溃的真实原因？

由于系统群体规模和访问规模的特殊性，每一行代码、每一张图片、每一个技术文档都反复核准，优化再优化，精益求精。为确保系统运行更高效，他们将一张图片从 1MB 压缩到 500KB，再从 500KB 优化到 100KB。

2022-01-07 14:35:17

一码通大数据

找工作时居然也会被大数据“杀熟”

大数据时代下，数据是能源，如同于工业时代的石油。谁拥有了数据，谁就能够在其中获得利益。大众所不能接受的根本原因在于，还不能认为数据是一种财富，并且不能接受这种财富增值和变现的方式居然自己作为数据提供者也在参与。

2022-01-07 09:50:51

大数据信息应用

从虚拟财产权到大数据杀熟，数字侵权将走向何方？

近日，国家互联网信息办公室、工业和信息化部、公安部、国家市场监督管理总局四部门联合发布《互联网信息服务算法推荐管理规定》（以下简称《规定》），自2022年3月1日起施行。

2022-01-06 22:26:53

大数据安全信息

一文搞懂Hadoop生态系统

Hadoop体系也是一个计算框架，在这个框架下，可以使用一种简单的编程模式，通过多台计算机构成的集群，分布式处理大数据集。

2022-01-06 18:21:00

Hadoop 生态系统

Spark查询太慢？试试这款 Mpp 数据库吧！

Greenplum数据库是基于MPP架构的开源大数据平台，具有良好的弹性和线性扩展能力，内置并行存储、并行通信、并行计算和并行优化功能，兼容SQL标准，具有强大、高效的PB级数据存储、处理和实时分析能力，同时支持涵盖OLTP型业务的混合负载，可部署于企业裸机、容器、私有云和公有云中，已为全球金融、电信、制造等行业核心生产系统提供支撑。

2022-01-06 08:34:32

数据库 Spark查询

一个公式，教你规范定义数据指标

只要你在公司的数据部门工作过，就会知道“指标”在数据分析过程中的重要性，如果我们一开始就没搞清楚“指标”的具体定义，那么后边的数据分析全都是白费功夫。

2022-01-05 21:50:49

数据分析指标大数据

终于有人把数据挖掘讲明白了

随着大型数据库的建立和海量数据的不断涌现，人们迫切需要强有力的数据分析工具。但现实情况往往是“数据十分丰富，而信息相当贫乏”。

2022-01-05 18:27:44

数据挖掘工具

实时数仓 | 三分钟搞定Flink Cdc

Flink CDC Connector 是ApacheFlink的一组数据源连接器，使用变化数据捕获change data capture (CDC)从不同的数据库中提取变更数据。Flink CDC连接器将Debezium集成为引擎来捕获数据变更。

2022-01-05 18:18:01

Flink 数仓连接器

轻松搞跨数据治理，我们就靠这七招！

随着企业对数据重视程度的不断增加，数据治理解决方案越来越成熟，技术越来越先进。但不幸的是，仍有很多IT从业者，正陷入数据治理的泥潭中，无法自拔。为了帮助更多企业解决数据治理难题，本文梳理了7个常犯的错误。

2022-01-05 16:12:01

数据治理 CIO IT领导者

2022年，如何选择优秀数据分析工具？

数据分析软件选型不是一件小事儿，需要多方面权衡，还要综合利弊，充分考虑到应用的特性和框架等等要素。以下方法，或许能为更多企业的选型带来指导作用。

2022-01-05 15:50:09

数据分析工具数据分析数据

2022年大数据工程师薪资和工作趋势

Gartner 2021 年 4 月的一份报告预测，到 2022 年，全球超自动化经济将达到近6000亿美元，而帮助实现这一目标的方法就是从组织拥有的大量数据中获取洞察力。这就产生了对数据工程专业人士的需求。因此，数据工程领域正在迅速发展。这意味着什么呢?

2022-01-05 15:10:03

大数据数据工程师薪资

一篇文章彻底理解 Hive 常见的三种 Authentication 认证机制的配置与使用

本片博文，分享下 HIVE 常见的三种 AUTHENTICATION 认证机制，包括其配置与使用。

2022-01-05 10:22:17

Hive Authenticat 认证

数据架构对推动人工智能和医学的未来发展至关重要

新冠疫情不仅凸显了速度对医学发现的重要性，而且还凸显了数据科学和人工智能为这种加速提供帮助的重要性。

2022-01-04 16:01:11

数据架构人工智能医学

TalkingData安全岛：构筑新时代数据融通的基石原创

安全岛本身是一个安全计算平台，最主要的目的是为了让TalkingData和客户的数据在安全平台上进行安全合规的数据价值的交换，隔离掉双方的隐私问题，真正实现数据的价值，帮助客户解决原有数据能力上的不足。

2022-01-04 14:11:47

TalkingData 安全岛安全

从本地到云端，如何正确处理数据？

如何把数据从本地平滑迁移到云端?相信这是所有上云企业关注的重点!

2021-12-31 18:20:44

数据云端数据迁移

首个国产分布式数据库调研：TDSQL产品技术及服务能力排名第一

腾讯云TDSQL在产品实施的技术服务方面，建设了完善的产品实施服务、维保服务团队，有实力保障金融用户数据库产品的实施与日常运营。

2021-12-30 18:15:56

数据库 TDSQL

大数据都在帮我们做年终总结

2021年眼看接近了尾声，相信大家都能在各大网络平台上看到很多朋友在晒自己在一些APP的年终总结。

2021-12-30 11:16:31

大数据年终总结 APP

上一页 1 ··· 32 33 34 35 36 ··· 182 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营