51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术24年11月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9062内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9062 条
常用的时间序列分析方法总结和代码示例
时间序列是最流行的数据类型之一。视频，图像，像素，信号，任何有时间成分的东西都可以转化为时间序列。

2024-04-26 12:29:36

时间序列数据分析
放大招，数据运营全流程SOP
用户需求是客观存在的，最大难题是如何收集数据，了解到用户需求。有些人会说：这还不简单，直接让用户填问卷不就好了。问题是，你自己去买东西的时候会填问卷吗，填个屁。用户都是不想被过度打扰的，因此设计顾客旅程，分步骤引导用户留下数据，很重要。

2024-04-26 12:28:32

数据运营SOP
NameNode锁细粒度优化在B站的实践
NameNode是整个HDFS的核心组件，集中管理HDFS集群的所有元数据，主要包括文件系统的目录树、数据块集合和分布以及整个集群的拓扑结构。

2024-04-26 12:13:45

NameNodeHDFS核心
Hudi 1.0 新功能预览
本文将详细阐述 Hudi 1.0 在设计上的重新思考和设计思路，并深入探讨 1.0 版本中发布的一些新功能。Hudi 是一个高效的事务型数据湖仓平台，其核心特色是一个开放性的表格式定义和一套全面的事务数据库核心层。

2024-04-26 07:36:42

Hudi 1.0数据湖仓数据查询
学数据分析的八大误区，你中招了吗？
在设定学习目标的时候，到底是想提升目前岗位/行业的适应能力，还是提高自己在人才市场的竞争能力，是两个根本方向性问题。

2024-04-26 00:15:51

数据分析能力
我最常用的六个数据可视化工具，强烈推荐
今天给大家分享机器学习中用于数据可视化的 6 个 Python 库。

2024-04-25 16:27:07

数据可视化Python
探讨大数据在财政方面的潜力
当与大数据分析的力量相结合时，商品及服务税为政府、企业和消费者等打开了新机遇的大门。本文探讨了商品及服务税与大数据的融合，揭示了这种合作的潜在好处、创新应用，以及对经济和利益相关者可能产生的深远影响。

2024-04-24 15:08:17

大数据财政
探讨金融行业的大数据
金融生态系统中生成的数据量巨大且复杂，为彻底改变传统银行业务提供了巨大潜力。本文深入探讨银行业大数据领域，探讨其应用、优势、挑战及其对行业的变革性影响。

2024-04-24 14:59:08

大数据
系统设计：通过示例理解 MapReduce
MapReduce是一种专门设计用于处理无法在单台计算机上处理的大规模数据挑战的编程模型。

2024-04-24 11:05:03

MapReduce编程大数据
数据中台、数据仓库、数据治理与主数据的定位与差异
在数字化时代，大数据已经成为企业运营和决策的重要资产。为了更好地管理和利用这些数据，数据中台、数据仓库、数据治理和主数据管理等概念应运而生。这些概念听起来可能有些抽象，但实际上它们与我们的日常生活息息相关。

2024-04-22 13:36:00

数据中台数据仓库大数据
快手大数据安全治理实践
快手的数据平台旨在提升决策效率和业绩。该平台通过数据中台构建数据仓库和数据服务，包括分析决策、实验决策、AB 测试和核心资产服务等。目前，快手的数据量已达到万亿级，总数据量达到 EB 级。

2024-04-22 07:56:32

数据仓库数据中台数据服务
大数据是如何改变游戏业的?
自在线游戏诞生以来，技术的进步和数据的消费方式意味着这一领域一直在不断发展。近年来，该领域的大数据变化改变了游戏的开发、体验和营销方式。

2024-04-22 07:30:00

大数据
金融分布式系统中数据治理的四大陷阱
分布式系统的复杂性，需要整合来自多个不同来源的数据，进一步增加了数据治理的复杂性，这些系统需要复杂的策略来有效管理数据的完整性和安全性。

2024-04-19 16:12:23

大数据数据治理
用户行为分析模型实践（四）—— 留存分析模型
本文详细介绍了留存分析模型的概念及基本原理，并阐述了其在产品中具体实现。针对在实际使用过程问题，探索了基于ClickHouse留存分析模型实践方案。

2024-04-18 08:30:00

留存分析模型数据分析
一文带您了解权重证据(WoE)与信息价值(IV)：数据分析的重要利器
WOE和IV是数据分析和建模中的重要工具，它们能够帮助我们发现特征与目标变量之间的关系，并指导我们做出更好的决策。通过深入理解这些技术的原理和应用，我们可以更好地优化模型，提高预测准确性，从而实现更好的业务结果。​

2024-04-17 08:46:17

数据分析工具WoE
物化视图在 MaxCompute 中的探索与实践
物化视图（Materialized View，以下简称 MV）是将查询结果预先计算并存储的一种特殊的物理表，当执行相关查询时，可以自动复用预计算结果，提高查询性能。物化视图作为一种查询加速器，在云计算和大数据时代有着广泛的用途。今天和大家分享物化视图在 MaxCompute 的实践。

2024-04-17 07:21:52

物化视图查询加速器数据仓库
第三代指标平台定义、能力与技术详解
今天分享的主题是第三代指标平台如何做“轻”数仓。传统数仓的应用层需要面向业务场景做大量的宽表和汇总表开发，今天我们来探讨是不是有新的解决思路。

2024-04-16 07:18:54

指标平台数仓数智化分析
蚂蚁数科入选IDC《数据要素全景研究》代表技术厂商
作为国内最早布局区块链、隐私计算等前沿技术的厂商之一，蚂蚁数科在数据要素领域持续深耕，围绕数据要素价值释放全流程，在数据安全、数据合规、数据流通与数据应用等环节，都推出了针对性的技术产品与解决方案，促进数据安全合规、高效流通，加速数据要素价值释放。

2024-04-12 20:29:31

蚂蚁数科数据要素数据应用
全生命周期数据收集与管理：实现可持续建筑的关键
今天，我们一起来聊聊在建筑全生命周期内进行数据采集和管理的重要性及应用。通过对设计、施工和运营阶段的数据收集和管理，可以实现建筑的可持续发展目标，提高效率、降低成本、优化设计和运营，并促进智能化建筑的发展。本文将重点探讨数据收集与管理的方法、技术和应用，以及在实践中的价值和挑战。

2024-04-12 10:11:29

数据收集数据管理建筑
数据如何影响产业数字化进程 译文
数据因行业不同而不同，这也影响着不同行业的数字化进程——在某个行业中有效的策略在另一个行业中却行不通。而信息的多样性和可用性如何影响不同领域的数字化转型过程呢？

2024-04-11 10:09:49

数字化转型
如何更有效地利用大数据优化智能建筑运营
尽管智能建筑数据利用面临一些挑战，但通过大数据技术的应用和持续优化管理策略，可以充分发挥数据的价值，实现智能建筑运营管理的更高水平……

2024-04-11 09:30:00

大数据物联网楼宇自控
构建数字化、脱碳能源未来：技术驱动的绿色转型
数字化、脱碳能源未来是实现可持续发展和保护地球家园的关键路径之一。利用人工智能、物联网、大数据等技术，我们可以提高能源利用效率，减少碳排放，为人类创造一个更加绿色、健康、可持续的未来。

2024-04-10 11:02:48

物联网大数据人工智能
又踩坑了！BigDecimal使用的五个坑！
由于计算机的资源是有限的，所以是没办法用二进制精确的表示 0.1，只能用「近似值」来表示，就是在有限的精度情况下，最大化接近 0.1 的二进制数，于是就会造成精度缺失的情况。

2024-04-10 08:39:56

BigDecimal浮点数二进制
指标平台加速零售数字化转型--Kyligence Zen 智能一站式指标平台
宗正老师是大数据资深技术布道师，本次聚焦零售行业，分享如何利用指标平台及相应的技术方法，加速零售的数字化转型。

2024-04-10 07:24:58

数字化转型指标平台数据驱动
肯睿Cloudera宣布新任大中华区副总裁
刘汨春担任肯睿Cloudera大中华区副总裁，大数据和大模型赋能中国企业加速数字化转型

2024-04-09 11:49:07

数据云AI
2024年治理革命：大数据和GenAI
2024年，在大数据和生成式人工智能（GenAI）融合的推动下，治理格局正在经历深刻的变革。这种革命性的结合正在重塑政府收集、分析和利用数据，以做出明智决策和应对复杂社会挑战的方式。

2024-04-09 10:58:11

大数据人工智能GenAI
大数据泄露！boAt 的750万客户记录在暗网上被曝光
这次泄露最初由《福布斯印度》报道，据报道包括用户的敏感个人身份信息(PII)，如姓名、地址、电话号码、电子邮件地址、客户ID等。

2024-04-08 11:28:14

大数据泄露安全专家网络安全
掌握数据：AI和嵌入式分析如何驱动业务成果
能够有效利用数据作为战略资产的组织将不可避免地建立竞争优势，并在长期内超越同行。然而，这是一把双刃剑。如果不优先考虑，劣质数据最终会让组织付出代价。70%难以信任其数据的专业人士声称数据质量是最大的问题。

2024-04-08 08:20:00

大数据
数据治理的六大核心准则，终于有人讲明白了
当然不同的企业的情况差距相对较大，数据治理的团队需要具体问题具体分析。在不同的阶段，不同的准则的作用是不一样的，这也需要数据治理团队灵活地掌握。当然基于这些准则并不能保证数据治理一定成功，所以需要科学的数据治理流程或者框架来尽可能提高数据治理的成功。

2024-04-08 00:00:01

数据治理核心准则团队
滴滴国际化出行场景指标体系建设
本文将介绍滴滴在国际化出行场景中对数据指标体系建设的最佳实践。指标建设解决方案重点从建立组织、建立流程、模型设计、指标工具和指标治理等 5 个维度阐述，基于当下的国际化业务场景实际，需要体系化地建立数据指标体系，从而有效解决以上痛点问题。

2024-04-02 07:56:41

数据指标数据分析
大数据如何改变商业世界
使用数据还可以使营销决策更加有效，因为营销团队不会依赖某人的直觉或不完整的调查来推动他们的决策。通过分析他们之前的营销工作、社交媒体和潜在消费者的习惯，他们可以更好地瞄准市场的特定部分并取得更好的结果

2024-04-02 07:00:00

大数据
Python 可视化：Plotly 库使用基础
当使用 Plotly 进行数据可视化时，我们可以通过以下示例展示多种绘图方法，每个示例都会有详细的注释和说明。

2024-04-01 11:53:42

PlotlyPython数据可视化
用户画像、用户分群、用户分层，到底有啥区别？
大量的用户指标与标签，形成了用户画像。用户画像是一个统称，通常一讲用户画像，大家都知道是在说用户的指标与标签问题。用户画像是数据服务业务的底座，有了用户画像才可以进一步地工作。

2024-03-29 11:39:57

用户画像用户分群用户分层
如何利用大数据分析来革新旅游业？
大数据正在革新旅游业，为企业提供宝贵的见解，以增强其服务和定价策略。

2024-03-29 11:16:35

大数据大数据分析
使用 Java 进行大数据分析公众号阅读量 10 万+ 文章标题的秘密
无论是Java编程技巧的分享，还是公众号的运营管理，都需要我们深入掌握一门技术或者一项业务的精髓，并辅以实践的锻炼和自我迭代的能力。

2024-03-28 08:10:37

Java技巧SEO
一篇讲明白 Hadoop 生态的三大部件
Spark 由 Twitter 公司开发并开源，解决了海量数据流式分析的问题。Spark 首先将数据 导入 Spark 集群，然后通过基于内存的管理方式对数据进行快速扫描，通过迭代算法实现 全局 I/O 操作的最小化，达到提升整体处理性能的目的。

2024-03-27 18:22:58

Hadoop部件生态
欧盟《数据法》将如何改变数据的使用和共享方式？
整体看来《数据法》似乎对美国科技巨头影响大一些，但对于中国出海企业而已同样具有挑战，尤其是《数据法》在国际数据传输方面的限制……

2024-03-27 15:31:34

大数据物联网人工智能
数据分析，如何实现降本增效？
隐形的羊毛更难受。比如很多公司做促销活动，总喜欢搞“全场大促”，心理感觉可以多覆盖用户，可实际上参与的都是同一批人。结果经常是有活动的产品销量大涨，没活动的一蹶不振，总业绩也不见涨。

2024-03-27 12:31:54

数据分析降本增效促销活动
Denodo数据编织研讨会召开，“逻辑数据编织之父”分享数据管理新趋势
2024年3月22日，由Denodo主办的数据编织研讨会在深圳召开。会议以“Fearless Data（无畏于数据）”为主题，与会嘉宾围绕行业趋势、核心技术及垂直行业应用等话题展开探讨，为AI浪潮下中国企业的数字化转型提供数据管理新范式。

2024-03-27 10:24:13

Denodo数据编织
绿色企业如何利用大数据？
当尝试创建绿色企业时，需要考虑很多事情。其中需要意识到的一件事是可持续性和技术的交集。提高绿色企业运营效率的方法之一是投资大数据。

2024-03-26 16:08:40

大数据绿色企业
大厂都要求的“数据分析闭环”，该如何实现？
完整的数据闭环，应该是：用数据监控业务 → 发现业务中的问题 → 分析问题原因 → 选择解决方案 → 继续监控业务走势，这样一条完整的链路。如果能实现闭环，肯定是做到了真正的数据驱动，既能体现数据分析的价值，又能促成业务科学办事，避免拍脑袋决策，是最好的状态了。

2024-03-26 11:37:08

数据分析业务
滴滴大数据资产治理实践
数据资产治理是大数据应用中的重要一环。有效的数据治理可以降本增效，提升数据利用效率。数据治理还需要平台化工具来辅助。本文将介绍滴滴出行在大数据资产治理方面的实践。

2024-03-26 06:46:52

大数据数据治理大数据资产治理
这是我见过最精准的预测模型
预测问题的背后，是一个很深层的业务问题：在很多公司，库存积压的损失是直观可见的，货都烂在货仓里。但缺货损失的潜在销量，却没有认真统计。想统计缺货损失很容易，可以让客户交定金预约，可以让客户登记需求量和需求时间。但很多公司业务要么懒，要么蠢，要么不想担责任，总之是没有做。

2024-03-26 00:54:42

预测模型数据
应对生成人工智能的挑战，数据治理要如何发展？ 译文 精选
生成式人工智能为组织如何获取和使用数据带来了新的风险、挑战和机遇。数据治理团队可以通过以下四种方式应对这一挑战。

2024-03-25 19:47:00

AIGC数据治理
八个常见的数据可视化错误以及如何避免它们
在当今以数据驱动为主导的世界里，清晰且具有洞察力的数据可视化至关重要。然而，在创建数据可视化时很容易犯错误，这可能导致对数据的错误解读。本文将探讨一些常见的糟糕数据可视化示例，并提供如何避免这些错误的建议。

2024-03-25 14:17:52

数据可视化数据驱动
大数据 AI 一体化解读
本文将从以数据为中心的模型开发、基础设施建设、数据分析应用等多个方面为您解读大数据 AI 一体化。在大数据和 AI 的推动下，近年来出现了一些非常令人欣喜的科技进展。

2024-03-25 08:15:02

数据分析AI 一体化大数据
人工智能技术在群聊类数据分析中的探索
随着互联网的快速发展，社交网络已经成为了现代人日常生活中不可或缺的一部分。其中，群聊作为一种集体交流的方式，承载了丰富多样的信息，从文字到语音，再到图片和视频，内容形式多样，且充满碎片化特性。

2024-03-22 14:56:43

人工智能数据分析
探讨大数据与供应链分析
大数据和供应链分析之间的合作具有巨大的潜力，可以彻底改变组织设计、管理和简化供应链的方式。本文深入探讨了与在供应链分析中利用大数据相关的关键概念、挑战、好处、应用和未来方向。

2024-03-22 09:56:48

供应链分析大数据
人工智能与数据分类和治理的重要作用
有些人对数据分类的含义感到困惑，毕竟，大多数存储的数据不是已经分类了吗?这可以更好地定义人工智能背景下的数据分类。数据分类涉及根据数据的性质、敏感性以及暴露或丢失的影响将数据分为不同类型。

2024-03-21 16:17:13

人工智能数据分类AI
现代数据堆栈需要彻底改革
现代数据堆栈已崩溃。从全球范围来看，平均每个组织使用130种不同的软件应用程序。由于有如此多的技术可用，数据管理很快就会变得复杂。

2024-03-21 15:54:00

数据堆栈数据管理数据结构
上一页 1 ··· 45678 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服