51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术24年11月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9034内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9034 条
想要解决数据治理的难题吗?首先，摒弃无稽之谈
我可以在电子邮件中处理的胡言乱语是有限度的，上周，一份SubStack时事通讯大胆宣布，“揭开复杂性：理解数据治理程序失败的原因”，这一限制被打破了。

2023-12-26 14:39:08

大数据数据治理
人货匹配模型没搞懂？互联网行业都在讨论它
所谓电子商务，还是商务，本质上运作的逻辑是一样的。不同的是，互联网上用户行为能留下充分的数据记录，因此能进行相对准确的分析。再也不用像传统门店那样，靠研究人员现场肉眼观察消费动线了。​

2023-12-26 13:15:20

人货匹配模型
RocketMQ中各类重复消费的原理浅析
本文将通过RocketMQ作为例子，来扒一扒什么情况下会导致重复消费。

2023-12-25 19:28:59

RocketMQ大数据
EDA中常用的九个可视化图表介绍和代码示例
探索性数据分析(EDA)是数据科学家用来分析和调查数据集并总结其主要特征的一种方法，通常采用数据可视化技术。我们可以说EDA是通过创建可视化和摘要来调查和理解数据集的过程。

2023-12-25 15:51:07

探索性数据分析数据可视化
为什么非侵入性数据治理是优秀方法
Seiner花了20年的时间研究数据治理。作为Kik Consulting的总裁和负责人，他与公司合作解决他们的治理问题，并实施他的非侵入性数据治理框架。

2023-12-25 15:40:37

数据治理大数据GenAI
海量层次信息可视化技术Treemaps在收入保障系统中的应用
本文将介绍海量层次信息可视化技术——Treemaps，在收入保障系统中是如何展示这些指标数据的。

2023-12-24 09:52:37

Treemaps
如何通过数据释放智能建筑节能潜力
在本文中，我们将探讨数据在能源效率方面的重要性、数据的使用方式以及测量能源效率的方法。

2023-12-23 11:54:58

智能建筑大数据能源效率
大数据分析领域的职业机会
大数据科学家在利用Python和R等编程语言以及应用自然语言处理和预测建模等学科方面发挥着关键作用，专业人士从海量数据集中提取洞察力，支持数据驱动的决策并预测组织成功的未来结果。

2023-12-22 15:49:02

大数据科学家Python数据分析师
聚焦数据，探索分布式数据库与湖仓一体的前沿应用 原创 精选
近期，51CTO举办了两场技术直播活动，围绕数据库前沿趋势和实践应用，分别以“分布式数据库应用与挑战”和“湖仓一体的技术实践”为主题，邀请了51CTO学堂金牌讲师以及数据库方向的企业技术专家进行分享，帮助用户更好地了解并掌握数据库领域的前沿技术趋势以及落地应用方法。

2023-12-22 14:29:41

数据库分布式数据库湖仓一体
2024年非结构化数据管理将以四种方式发生变化
随着我们进入2024年，公司将需要创新并更智能地使用AI。数据存储和备份至少占IT预算的30%。我们下面的预测集中在优化AI和云技术的数据管理组件上，随着GenAI开启最终用户生产力和技术熟练的新纪元，其具有长期的影响。

2023-12-22 11:08:03

GenAIIT预算IT领导者
六个探索性数据分析(EDA)工具，太实用了！
在本文中将介绍六个极其实用的探索性数据分析(EDA)工具，这些工具能够帮助您更好地理解数据、发现隐藏的信息，并为后续分析和决策提供有力支持。

2023-12-22 09:14:48

EDA数据分析探索性数据分析
什么是数据湖？
数据湖汇集了这两个世界的精华，提供了一个既灵活又强大的解决方案。随着我们对该主题的深入研究，我们将了解为什么它会成为数据管理领域的游戏规则改变者。

2023-12-21 11:44:11

数据湖数据管理数据存储库
十分钟搞定，开源可视化低代码平台
GoView 是一个高效的拖拽式低代码数据可视化开发平台，将图表或页面元素封装为基础组件，无需编写代码即可制作数据大屏，减少心智负担。

2023-12-21 11:39:47

GoView可视化开源
关于 A/B 实验中策略长期效果评估方案的研究
本文将介绍 A/B 实验在评估策略长期效果上的方案研究。文章将剖析 A/B 实验长短期效应产生的原因，分享工业界评估策略长期效果的方案，并介绍一些实际业务案例。

2023-12-21 07:24:28

A/B 实验CCD 实验组量化策略
年终盘点：2023年炙手可热的10家大数据初创公司
大数据初创公司源源不断地开发领先技术来帮助企业访问、收集、管理、移动、转换、分析、理解、测量、治理、维护和保护数据。以下来看看2023年备受关注的十家大数据初创公司。

2023-12-20 17:30:56

大数据初创公司数据
数据治理与大模型一体化实践
大模型落地到当前这个阶段，核心关注点还是领域大模型，而领域大模型落地的前提在于两点：需求端，对当前应用的降本增效以及新应用的探索；供给端，训练技术已经有较高的成熟度。

2023-12-20 07:35:03

大模型数据治理机器学习
大数据如何实时拯救生命：车联网的数据分析有助预防交通事故 译文
在车联网的数据分析中需要注意什么?接近实时的数据分析平台和实际的实时分析数据平台有什么区别?

2023-12-19 09:00:00

大数据数据分析车联网
独立站访问量破十万大关，易点天下KreadoAI加码下的假发出海赛道原来可以这么玩？
独立站访问量破十万大关，易点天下KreadoAI加码下的假发出海赛道原来可以这么玩？

2023-12-18 22:05:52

易点天下AIGCKreadoAI
咨询公司的数据分析模型有多高大上？带你涨涨姿势！
所谓分析模型和方法，都是有特定的使用背景、使用目的、使用效果的。而且并不是所有的分析方法，都是冲着“精准”去的。能快速、省事的解决问题，才是最终目的。

2023-12-18 11:29:44

分析模型效果矩阵法
Pandas的魅力：从数据处理到机器学习
在数据科学领域，数据处理和分析是至关重要的步骤。Pandas作为Python中最流行和强大的数据处理库之一，为数据科学家和分析师提供了强大的工具，使数据处理变得简单而愉快。本文将探讨Pandas的一些技术亮点，并介绍它在数据处理和机器学习中的魅力。

2023-12-18 10:36:46

数据处理PandasPython
走近Kafka：大数据领域的不败王者
本文介绍了 Kafka 以其高速、高性能、高可靠性和高可用性在大数据领域中占据重要地位。

2023-12-15 18:41:59

Kafka大数据消息队列
数据驱动的城市如何彻底改变城市生活
智慧城市的核心是通过技术改善市民的生活，推动可持续发展。我们使用的街道和家园正在适应人们的需求，变得更安全、更高效、更环保、更包容。随着合成数据的使用不断增加，这种适应正在得到推进。

2023-12-15 15:31:27

智慧城市数据驱动物联网
大数据分析和数据仓库的组合应对网络安全问题
数据驱动的基金会、组织和企业收集大量数据，它们使用现代化技术有效地存储、使用和收集数据，以便在需要时对其进行挖掘。

2023-12-14 14:41:37

大数据数据分析数据仓库
Hudi 在 vivo 湖仓一体的落地实践
在增效降本的大背景下，vivo大数据基础团队引入Hudi组件为公司业务部门湖仓加速的场景进行赋能。主要应用在流批同源、实时链路优化及宽表拼接等业务场景。

2023-12-14 13:01:00

Hudivivo
欧盟《数据法案》正式通过，将对行业有何影响？
该法律预计将于 2025 年 7 月底生效。对于制造、供应和处理智能设备相关数据的公司的全面影响仍不清楚。在该法律生效之前的过渡期间，企业收集和存储互联产品数据的方式将需要进行特殊改变。

2023-12-14 10:27:04

数据法案GDPR条例大数据
基于Python实现大规模光栅人口数据可视化 译文 精选
本文旨在探讨如何使用Python语言实现包括全球、国家和城市级别的跨多个尺度的地理空间人口数据的可视化。

2023-12-14 09:00:00

数据可视化Python数据集
大数据有哪些发展趋势以及在不同行业的应用
特别是随着云计算、边缘计算、物联网和流媒体等创新技术的出现，对于那些希望更好地了解客户和运营潜力的企业来说，大数据已经变得越来越普遍。

2023-12-13 15:17:54

大数据大数据分析人工智能
数据驱动业务方法
数据驱动业务可以帮助企业提高决策效率和准确性、优化业务流程和降低成本、提升用户体验和增加用户忠诚度、发现新的商业机会和拓展市场，以及提高企业竞争力和市场地位。

2023-12-13 13:35:50

数据驱动数字化转型数据分析
又一数据处理神器，通过GPU加速Pandas性能！
本文以 Python 3.10 和 Nvidia T4 GPU 运行整个代码为例说明 cuDF 的使用。

2023-12-13 13:23:21

GPUPandas
数据分析防掉坑指南
只要你听到的不是一个具体指标，都得打起十二分精神。因为没有经过专业训练的人，根本分不清楚自己想问的是啥。一句“分析分析”就完事了。分析问题混乱是常事。

2023-12-13 12:46:49

数据分析指标算法
如何让数据湖仓达到数据仓库的性能
数据湖仓库的演变重塑了数据分析，结合了数据湖和数据仓库的优势。尽管它具有变革性的潜力，但诸如高效查询性能等挑战仍然存在。创新解决方案如MPP查询执行、缓存框架和系统级优化可能弥合这些差距，并使企业能够享受湖仓库的所有好处，而无需承受任何缺点。

2023-12-13 07:26:24

数据湖仓数据仓库性能
关于大数据服务应该了解的一切
大数据是一个在商业和技术领域广泛使用的术语。简而言之，这是从各种来源获取极大量复杂数据，并对其进行分析以发现模式、趋势、问题并提供获得有用见解的机会的过程。

2023-12-11 16:36:09

大数据BDaaS大数据即服务
太精彩了，原来RFM模型还可以这样用
任何模型都有其产生的历史背景、数据基础、使用范围，也不是所有模型的目的都是精准。简单、好用、省事，是更多时候的考虑。​

2023-12-11 13:57:00

RFM模型激励机制
​Alluxio SDK 在 Presto/Trino 中的应用
本文将分享 Alluxio Edge 在 Trino/ PrestoDB 中的应用。Alluxio System 作为分布式的数据编排系统，具有缓存功能，能够解决上面的痛点。同时，我们在思考，如何把缓存这个最基本、最常用的功能做得更极致化。计算机领域有句著名的话，“在计算机科学中只有两件难事：缓存失效和命名”。于是，就诞生了 Alluxio Edge。

2023-12-11 07:27:11

数据编排系统Alluxio数据平台
数据科学家95%的时间都在使用的11个基本分布
今天将为大家带来数据科学家95%的时间都在使用的11个基本分布。掌握这些分布，有助于我们更深入地理解数据的本质，并在数据分析和决策过程中做出更准确的推断和预测。

2023-12-08 13:53:47

基本分布数据科学数据分析
确定数据分布正态性的11种基本方法
本文将介绍测试数据正态性的11种基本方法，帮助读者更好地理解数据分布的特征和如何应用合适的方法进行分析。

2023-12-07 19:00:25

数据科学机器学习数据可视化
2023年五个自动化EDA库推荐
EDA或探索性数据分析是一项耗时的工作，但是由于EDA是不可避免的，所以Python出现了很多自动化库来减少执行分析所需的时间。EDA的主要目标不是制作花哨的图形或创建彩色的图形，而是获得对数据集的理解，并获得对变量之间的分布和相关性的初步见解。

2023-12-07 14:34:00

EDA数据集数据分析
经营分析，如何诊断业务问题
所谓“屋漏偏逢连夜雨”，就是这个局面。此时，想要用数据描述问题，容易，树个标杆就能看出差距。想用数据诊断问题，就得突破上边层层险阻，争取业务的支持和老板的理解，才能见效。这是从数据到落地的必经之路。

2023-12-07 12:38:07

经营分析诊断业务数据
2024年企业在数据安全战略方面有哪些变化
根据IBM的数据，2023年数据泄露的平均成本达到了创纪录的445万美元，比2020年上涨了15%，仅是财务影响就足以终结一家企业，但数据泄露也可能对品牌声誉和客户对企业的看法产生毁灭性影响。

2023-12-06 16:40:36

大数据数据安全
数据科学家95%的时间都在使用的11个基本图表
了解数据科学中最重要和最有用的图表非常重要，本文将带来数据科学家95%的时间都在使用的11个基本图表。

2023-12-06 13:42:00

图表可视化
用第三方拖拽库快速撸一个可视化搭建平台
全选和组合实现的思路其实本质上是对数组的操作. 全选的过程中, 我们需要先捕获全选的区域坐标, 然后过滤出这个区域内的组件, 然后批量更新数组中每个选中元素的选中状态。

2023-12-06 08:07:13

拖拽库可视化
小米数据生产平台的产品设计方法与实践
本文将分享小米数据生产平台的设计与实践。数据从生产到应用全流程大致可以分为 5 个步骤，首先是数据的产生，接下来对产生的数据进行收集，再找个容器存储起来，存储后进行处理加工，最后把数据投入应用。大部分数据产品都对应这五个环节。

2023-12-06 07:16:17

数据生产平台数据存储
网易数帆指标中台构建核心技术解析
本文将分享网易数帆在指标中台构建方面的实践。网易数帆指标中台（EasyMetrics）介于数据中台和下游的数据应用（主要是 BI）之间，提供了指标的标准化能力。通过“一次定义，多次复用”（Build once , use many），为业务决策和管理提供单一、可信的数据来源，解决长期以来指标口径不一致的问题。

2023-12-05 07:26:29

指标中台大数据
大数据：成功企业背后的燃料
行业专家指出，信息分析一直在发展，这主要受益于机器学习、人工智能的出现，以及企业越来越重视高级数据分析。

2023-12-04 14:02:43

大数据信息分析
Apache Celeborn 社区的今天和明天
本文将介绍 Apache Celeborn 的用途、核心设计及其社区现状与发展规划。数据的转换指的是数据发生变化、产生新的数据或者被过滤掉等。具体的实现方式包括算子和 UDF，如常见的 Filter、Project、Aggregation、Join，内置 function，自定义 UDF 等。

2023-12-04 07:42:13

大数据数据的转换
技术 or 业务？数据分析发展路径大盘点
本身，数据分析能力是个底层能力，各种岗位，各类公司都有需求。特别是最近各行各业的数字化转型大潮，使得做数据的同学在业务上，技术上都多了很多公司和行业可以选择。

2023-12-03 09:10:00

技术业务数据分析
大数据时代的数据集蒸馏，大型数据集上的首次成功
11 月 30 日，全球第一所人工智能大学——穆罕默德·本·扎耶德人工智能大学（MBZUAI），在 arXiv 预印平台发布了题为《大数据时代的数据集蒸馏》（Dataset Distillation in Large Data Era）的文章。

2023-12-01 16:23:52

大数据人工智能
数据湖和中央数据仓库的设计
数据网格（Data Mesh）具有相同的功能集，以满足领域驱动的分散化的目的。为了设计数据网格，强调遵循4个原则，并针对组织中不同团队提供了不同的责任。

2023-12-01 14:55:32

数据网格数据湖
如何看待大数据云原生发展之路--观 2023 云栖大会有感
作为一个大数据从业者，在公有云和容器化发展的大趋势下，我们关注的重点已经不仅仅是大模型，大数据在未来几年发展的重点方向是什么，大数据的技术演进路线会如何。

2023-12-01 08:36:01

大数据公有云容器
一起学 Elasticsearch 系列-聚合查询
聚合查询是 Elasticsearch 中一种强大的数据分析工具，用于从索引中提取和计算有关数据的统计信息。

2023-11-30 15:23:07

聚合查询数据分析
上一页 1 ··· 7891011 ··· 181
点赞

51CTO技术栈公众号

业务
速览
在线客服