51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术24年11月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9056内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9056 条
年终盘点：2024年最炙手可热的十家大数据初创公司
数据已经成为很多企业和组织的宝贵资产。他们正在分析数据以深入了解市场、客户和他们自己的运营情况。他们正在使用数据来推动数字化转型计划，支持新的数据密集型服务。

2024-12-19 13:49:24

数据初创AI数据
Kafka Streams 在监控场景的应用与实践
介绍 Kafka Streams 的原理架构，常见配置以及在监控场景的应用。

2024-12-19 09:45:24

服务器大数据
腾讯云流式湖仓统一存储实践
本文将分享腾讯云流式湖仓的架构与实践。腾讯云流计算基于开源的 Apache Flink 搭建，作为腾讯云大数据产品中的实时链路，是企业级实时大数据平台，具备一站式开发、5 秒无缝衔接、亚秒延迟、低成本、安全稳定等特性。

2024-12-16 08:34:13

大数据数据分析数据孤岛
命令行的视觉盛宴：如何用 Sampler 轻松实现数据可视化
面对复杂指令或大量信息时，传统的文本输出可能难以快速理解。使用Sampler这类工具可以将命令行结果以更直观、清晰的方式展示，使工作更加轻松高效。

2024-12-13 15:36:27

命令行CLI数据可视化
性能指标提升50%+，携程数据报表平台查询效率治理实践
本文概述了面对公司数据报表平台遇到的查询性能挑战，数据平台组围绕数据缓存、物化视图、查询策略、SQL质量等方向所做的一系列治理工作，以提升平台的查询效率和稳定性。

2024-12-13 10:50:00

数据开发携程
构建大模型时代的数据基础设施，腾讯云发布全新一代数据智能平台TCHouse-X
12月12日，腾讯云宣布发布全新一代数据智能平台TCHouse-X。该平台采用一体化、智能化、高性能、云原生等理念打造，大幅简化了传统数据平台的复杂架构，并引入了智能化系统交互、资源管理与运维管理能力，能够为大模型时代的应用创新提供一站式数据处理能力，助力企业高效释放数据价值。

2024-12-13 09:52:15

腾讯云数据智能TCHouse-X
高手的数据分析方法：标杆分析法
一个数据分析师去跟销售讲怎么卖出业绩，只会被人嘲笑“你他妈卖过1单吗！你敢教我！”但一个数据分析师去把销售大神们的祖传秘方总结出来分享，其他销售会伸长了脖子来听，还生怕听漏了。这就是标杆分析法的直观优势。

2024-12-09 13:11:22

标杆分析法业绩
Blaze：快手自研 Spark 向量化引擎从生产实践到社区开源
今天我要给大家分享的是 Spark 向量化技术引擎——Blaze。目前 Blaze 已经在快手大规模地投入生产了。

2024-12-09 08:27:02

Blaze数据架构数据平台
构建易于扩展的数据管道的五个要点​ 译文 精选
数据管道就是将数据从一个位置传输到另一个位置的一系列过程，常常在此过程中改变数据。

2024-12-09 08:00:00

数据管道数据处理
零基础入门Hadoop：IntelliJ IDEA远程连接服务器中Hadoop运行WordCount
我们简单地了解了大数据处理中一个经典的应用——WordCounter，并通过Hadoop框架的实践，展示了如何使用MapReduce进行分布式计算。虽然表面上看，WordCounter是一个相对简单的程序，但它却揭示了大数据处理中的核心思想。

2024-12-06 10:51:10

Hadoop大数据框架
大数据的3V、4V、7V，到底是什么意思？
在大数据领域，我们经常看到一些关于3V、4V、7V的说法。这些V，到底是什么意思呢？今天这篇文章，小枣君就简单给大家介绍一下。

2024-12-06 07:10:00

大数据3V4V
这是我见过最好的用户增长分析模型
当赛道具体到一个具体领域后（快消、耐用、零食、服务……），其目标用户群体的画像、消费力、人群数量是可以锁定的。这里有两个要重点关注的东西：用户消费力分层与用户复购行为。这两点，直接决定了增长打法。

2024-12-03 12:05:57

增长分析模型用户消费
如何搭建一个高效的运营分析体系？
数据本身不说明问题，数据+标准才说明问题。标准从哪里来？当然从业务目标里来，能达到目标就是做得好。

2024-11-29 12:51:18

运营分析体系
从 ETL 到 NoETL 的数据架构演进——Denodo 的创新解决方案
本文将深入探讨数据架构从传统 ETL 到新兴概念的转变历程，剖析 ETL 与 NoETL 技术的差异及应用场景，通过实际案例展现其在不同企业中的实践成果，并对未来发展趋势进行展望，为读者呈现数据领域的前沿动态与发展方向。

2024-11-29 08:40:34

ETLNoETL数据架构
万字长文 | 数据治理“三字经”，赋能实践路更明！ 原创 精选
在当今数字化时代，数据是企业最不可或缺的宝贵资源之一。然而，随着数据量的迅猛增长及其复杂性的日益提升，如何高效地管理、充分利用并妥善保护这些数据，已成为企业亟待攻克的一大难题。

2024-11-28 08:00:00

数据治理数字化
还在纠结每天的波动？用户活跃分析这么做！
在讲用户流失分析的时候，我们说过：流失分析的目的不是消灭流失率，而是把流失控制在可控范围内。在用户活跃分析的时候，道理类似：做活跃分析，不是为了逼用户天天来戳一下，而是为付费、转介绍提供稳定的支持。

2024-11-27 11:44:08

用户分析流失率
一文看懂大数据的四十年发展史
进入90年代后，随着互联网的诞生和爆发，信息革命进入了全新的阶段。越来越多的人开始购买计算机，访问互联网。也有越来越多的科研机构和企业开始上线IT系统，推动自身的信息化转型。

2024-11-26 18:05:02

大数据信息技术互联网
数据分析终极一问：指标波动有多大，才算是大！
硬指标和软指标的区分，不是一成不变的。比如很多互联网公司会考察“用户增长”，这时候注册用户数就是个硬指标，逼着推广部门完成。因此区分硬指标和软指标，要看部门具体KPI要求。

2024-11-26 14:45:29

数据分析互联网KPI
什么是数据架构师？技能、薪资以及如何成为数据框架大师
数据架构师是连接业务与技术的重要桥梁，负责设计并实施企业的数据管理框架。

2024-11-25 17:11:13

大数据数据架构师数字化转型
目标明确：引领企业AI成功的北极星
企业已意识到生成式AI是促进创新和提高生产力的绝佳机会，但要真正释放其商业价值，关键在于有目的的采取行动。

2024-11-25 14:23:36

Cloudera生成式AI
滴滴ChatBI技术实践：智能数据分析的前沿探索与应用
滴滴团队在 23 年初就坚定地投身于大模型，致力于数据产品的升级与探索，截至目前，我们已经取得了一些阶段性的成果并成功落地。

2024-11-25 08:50:24

大模型智能数据分析AI
火山引擎基于大模型 ChatBI 的演进与实践
今天分享的主题是火山引擎 DataWind ChatBI 基于大模型的演进与实践。DataWind 是火山引擎推出的 BI 平台。在建设初始阶段，DataWind 主要聚焦于 MVP 产品路径的构建，致力于满足研发者、分析师、一线业务及日常协同办公等多方面的需求。

2024-11-25 08:20:22

大模型DataWind数据分析
京东数据架构解析：供应链效率提升与决策优化策略
本文介绍了数据编织在数据分析与治理中的应用。我们的目标是将传统数据处理方式升级至指标中台模式，旨在革新数据计算与加工流程。

2024-11-21 08:33:29

数据编织数据分析数据架构
四个方法，拯救你枯燥的数据日报
为什么每日指标会波动，这个很纠结的问题，提前准备了答案。通过打标签、梳理事件、定KPI，充分暴露波动背后的问题，引发深入思考。

2024-11-20 12:21:37

数据波动标签
使用亮数据解决数据采集的困境
在大数据时代，数据被视为推动生产力增长的核心资源。然而，获取网络数据的过程远比人们想象的要复杂和具有挑战性。

2024-11-18 08:29:43

大数据网络数据数据采集
用通用语义层解决数据不一致问题 译文 精选
不同的BI、分析和数据科学工具导致用户组之间在数据解释、业务逻辑和定义方面存在差异，通用语义层可以解决这些差异。

2024-11-18 08:00:00

数据仓库通用语义层商业智能
分析指标波动，数据模型得这么建
数据分析需要跑数，但想解读跑出来的数，需要的是掌握丰富的事实情况，用数据量化评估其中可量化的部分，监控其中持续发展的部分，拆解其中模糊部分，从而越来越接近真相。

2024-11-15 11:43:21

指标波动数据模型
用 Python 进行大数据处理六个开源工具
本文介绍了六个常用的 Python 大数据处理工具，每个工具都有其独特的优势和适用场景。通过实际的代码示例，我们展示了如何使用这些工具处理大规模数据集。

2024-11-14 12:00:00

Python开源大数据
抖音集团数据血缘深度应用：架构、指标与优化实践
在抖音集团内，对于数据血缘建设的目标是：构建全覆盖、实时、准确的大数据血缘，基于血缘数据打造全场景血缘应用赋能提效。这里我们的认知是：数据血缘是元数据的核心基础能力，如果想致力于打造更高效的数据平台，可提高对于数据血缘的建设重视程度。

2024-11-13 08:47:24

数据血缘元数据数据平台
数据湖系列 | 数据湖存储加速方案的发展和对比分析
类似客户 H 遇到的这些问题的例子还有不少。他们中大多都经历了从自建 IT 基础设施到开源大数据生态的时期，并尝试将以前的经验复制到 AI 场景。

2024-11-13 08:43:47

数据湖存储IT
什么是顶级的数据分析方法？
数据分析的方法是非常多的。但为什么很多同学感觉自己没用上方法呢？因为每种方法是和业务场景、领导风格、数据质量、息息相关的。

2024-11-08 12:36:35

数据分析业务场景时间序列法
Python 统计分析常用的 30 个经典脚本
本文介绍了使用 Python 对数据进行统计分析的 30 个经典操作，涵盖了从基本的描述性统计到更高级的统计度量。每个操作都附有代码实现和输出结果，以便读者方便地在实际应用中使用这些方法。

2024-11-07 11:10:34

Python脚本统计分析
数据管理的四大支柱：揭秘数据中台、数据仓库、数据治理和主数据
数据中台作为数据的“中央厨房”，负责数据的整合和加工；数据仓库作为数据的“图书馆”，负责数据的存储和查询分析；数据治理作为数据的“交警”，确保数据的规范和安全；而主数据作为数据的“身份证”，确保数据的权威性和一致性。这些概念在企业中相互协作，共同构成完整的数据管理体系。

2024-11-07 09:56:47

数据管理数据中台数据仓库
用户分析，找到一份完整的攻略
在数据上，观察培养与筛选的区别，主要看用户的需求是否会随着与我司关系深入而增加，以及能否被我司营销行为影响。如果经过长期相处与反复投放，都很难提升用户表现，则说明至少在当下我司力所能及的范围内，用户是无法被培养的。如果有某些措施能明显提升用户表现，则说明这个手段是好的培养手段。

2024-11-07 08:50:56

用户分析分类维度标签
大数据技术之Flink：你俩不行，还是我“流”的好
随着移动互联网、物联网的兴起，每分每秒都在产生大量的数据，例如传感器产生的数据、订单交易数据、用户行为记录等。这些无时不刻都在产生的数据，我们称之为无界数据或流数据。通常被用于用户行为分析进行实时推荐、销售数据实时分析进行营销策略调整等场景。

2024-11-06 10:30:22

Flink互联网物联网
从数据中台到数据飞轮：解锁企业发展的新动力 原创
在当今的数据时代，企业越来越意识到数据对业务的重要性。然而，通过不断地试错企业认识到，仅仅构建数据中台并不能带来业务增长。需要在数据中台的基础上，利用数据驱动为上层业务，让数据与业务协同工作形成商业闭环，才能促使业务的飞速增长。这就需要引入“数据飞轮”的概念，它帮助企业有效利用数据资产，驱动持续改进并保持竞争优势。通过理解和应用数据飞轮的能力，能为业务发展提供新方向和新思路。

2024-11-06 10:00:00

数据飞轮数据中台
六款超好用的数据可视化工具，你知道几个？
Flourish是一款功能强大的在线数据可视化工具，只要输入数据，它就可以帮你生成各种静态图表和动态图表，输入数据的格式包括excel、json、csv或者自建。

2024-11-04 08:49:11

数据可视化工具
高性能PHP框架Webman服务端实现流式输出有哪些解决方案？
Stream流式输出是一种数据处理方式，它将数据以流的形式进行传输和处理。在这种处理方式中，数据不再是集中存储在某个地方，而是以分散的方式存储在各个节点上，并不断流动。数据流的处理是在流动的过程中完成的，因此能够实时地处理数据，提高了数据处理效率。

2024-11-01 11:46:59

webman服务端流式
腾讯基于 LLM 的智能数据分析平台 OlaChat 的落地实践
随着大语言模型（Large Language Models, LLMs）的快速发展，智能分析在商业智能（Business Intelligence, BI）领域的影响日益显著。本节将探讨从传统 BI 到智能 BI 的过渡过程，分析这一转型所带来的新机遇与挑战。

2024-11-01 08:16:54

大语言模型LLM数据分析
这才是大厂的经营分析报告，而不是“念PPT会”
Rustls是可用于生产的TLS在Rust中的实现，比它的C对应物更快更安全。它的强大之处在于它不局限于Rust，它也可以在任何带有rustls-ffi的语言中使用，所以可以期待其他语言(如C、C++、Python和Ruby)的项目都能采用它。

2024-10-31 11:28:59

Rust项目语言
让数据的飞轮再转一会 原创
每个时代都期盼一个英雄来拯救，就如同IT界每个时期需要一个新理念来承载所有人的梦想一样，哪怕有些梦想注定难以变成现实，也能让梦想得以延续。

2024-10-31 10:00:00

数据飞轮数据中台
抖音集团指标管理与消费体系建设实践
本文将介绍抖音集团管理数据、应对数据质量与效率挑战的策略，重点聚焦于如何通过指标服务提升数据产品的稳定性和可复用性。

2024-10-31 08:22:56

数据管理指标管理消费体系建设
数据分析十大模型：决策模型
注意！即使没有模型，手工也能做处理。一般做投放的同学，会用每个渠道投放费用/获客数量，计算每单位获客成本（CAC），然后看哪个渠道的获客成本低，就先把这个渠道全部投满，然后看看手头还剩多少钱，继续投成本第二低的。

2024-10-30 12:21:18

数据分析决策模型驱动
做数据十年，第一次见这么棒的数据分析方法
想真正理解&掌握数据分析方法，当然不能这样“拿着锤子找钉”。工作中的数据分析，要紧密结合业务，服务业务需求。因此理解业务需求，围绕问题找答案，才能理解各种数据分析方法有什么用，该怎么用。

2024-10-30 12:17:51

数据分析方法全流程
夜莺Nightingale：打造高可用监控平台
在本文中，我们详细介绍了如何部署和配置夜莺Nightingale监控平台，以实现高可用性监控架构。通过精心设计的Redis集群、MySQL主从复制、Prometheus数据源集成，以及Keepalived的高可用配置。

2024-10-30 08:04:20

监控平台夜莺Redis集群
快手电商数据指标体系建设与实践
本文将分享快手电商在数据指标体系建设方面的探索与实践。快手电商的经营场景主要涉及电商的"人货场"概念，具体为内容场和货架场，通过这些场域与用户建立连接，提供价值。

2024-10-29 08:09:18

数据生产数据查询数据使用
麦肯锡都在用的MVP分析法，到底是什么？
MVP（Minimum Viable Product）原本是应用于产品设计的方法。指在正式推出产品前，先推出一个版包含核心功能的简单版本，测试用户需求与反馈，从而快速判断产品是否符合市场需求，做出调整。

2024-10-28 13:07:35

MVP分析法产品
如何使用 Pandas 进行数据清洗？如何保证数据清洗的效果？
考虑使用自动化工具和框架来简化数据清洗过程。例如，使用 Apache Airflow 或 Prefect 来自动化数据管道，确保数据清洗步骤的一致性和可重复性。

2024-10-28 12:57:36

Pandas数据清洗
结合 NumPy 和 Matplotlib 进行数据可视化的十种创意
本文我们可以看到 NumPy 和 Matplotlib 在数据可视化中的强大能力，无论是简单的正弦波形还是复杂的等高线图，都能轻松实现。

2024-10-24 16:43:15

NumPyMatplotlib数据可视化
提升效率的十种 Pandas 数据操作方法
无论是数据清洗还是探索性数据分析，Pandas都能帮你轻松搞定。接下来，我会分享十个技巧，让你在处理数据时更加高效。

2024-10-23 09:00:00

数据分析Pandas
1 23456 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服