51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术24年11月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9034内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9034 条
掌握数据：AI和嵌入式分析如何驱动业务成果
能够有效利用数据作为战略资产的组织将不可避免地建立竞争优势，并在长期内超越同行。然而，这是一把双刃剑。如果不优先考虑，劣质数据最终会让组织付出代价。70%难以信任其数据的专业人士声称数据质量是最大的问题。

2024-04-08 08:20:00

大数据
数据治理的六大核心准则，终于有人讲明白了
当然不同的企业的情况差距相对较大，数据治理的团队需要具体问题具体分析。在不同的阶段，不同的准则的作用是不一样的，这也需要数据治理团队灵活地掌握。当然基于这些准则并不能保证数据治理一定成功，所以需要科学的数据治理流程或者框架来尽可能提高数据治理的成功。

2024-04-08 00:00:01

数据治理核心准则团队
滴滴国际化出行场景指标体系建设
本文将介绍滴滴在国际化出行场景中对数据指标体系建设的最佳实践。指标建设解决方案重点从建立组织、建立流程、模型设计、指标工具和指标治理等 5 个维度阐述，基于当下的国际化业务场景实际，需要体系化地建立数据指标体系，从而有效解决以上痛点问题。

2024-04-02 07:56:41

数据指标数据分析
大数据如何改变商业世界
使用数据还可以使营销决策更加有效，因为营销团队不会依赖某人的直觉或不完整的调查来推动他们的决策。通过分析他们之前的营销工作、社交媒体和潜在消费者的习惯，他们可以更好地瞄准市场的特定部分并取得更好的结果

2024-04-02 07:00:00

大数据
Python 可视化：Plotly 库使用基础
当使用 Plotly 进行数据可视化时，我们可以通过以下示例展示多种绘图方法，每个示例都会有详细的注释和说明。

2024-04-01 11:53:42

PlotlyPython数据可视化
用户画像、用户分群、用户分层，到底有啥区别？
大量的用户指标与标签，形成了用户画像。用户画像是一个统称，通常一讲用户画像，大家都知道是在说用户的指标与标签问题。用户画像是数据服务业务的底座，有了用户画像才可以进一步地工作。

2024-03-29 11:39:57

用户画像用户分群用户分层
如何利用大数据分析来革新旅游业？
大数据正在革新旅游业，为企业提供宝贵的见解，以增强其服务和定价策略。

2024-03-29 11:16:35

大数据大数据分析
使用 Java 进行大数据分析公众号阅读量 10 万+ 文章标题的秘密
无论是Java编程技巧的分享，还是公众号的运营管理，都需要我们深入掌握一门技术或者一项业务的精髓，并辅以实践的锻炼和自我迭代的能力。

2024-03-28 08:10:37

Java技巧SEO
一篇讲明白 Hadoop 生态的三大部件
Spark 由 Twitter 公司开发并开源，解决了海量数据流式分析的问题。Spark 首先将数据 导入 Spark 集群，然后通过基于内存的管理方式对数据进行快速扫描，通过迭代算法实现 全局 I/O 操作的最小化，达到提升整体处理性能的目的。

2024-03-27 18:22:58

Hadoop部件生态
欧盟《数据法》将如何改变数据的使用和共享方式？
整体看来《数据法》似乎对美国科技巨头影响大一些，但对于中国出海企业而已同样具有挑战，尤其是《数据法》在国际数据传输方面的限制……

2024-03-27 15:31:34

大数据物联网人工智能
数据分析，如何实现降本增效？
隐形的羊毛更难受。比如很多公司做促销活动，总喜欢搞“全场大促”，心理感觉可以多覆盖用户，可实际上参与的都是同一批人。结果经常是有活动的产品销量大涨，没活动的一蹶不振，总业绩也不见涨。

2024-03-27 12:31:54

数据分析降本增效促销活动
Denodo数据编织研讨会召开，“逻辑数据编织之父”分享数据管理新趋势
2024年3月22日，由Denodo主办的数据编织研讨会在深圳召开。会议以“Fearless Data（无畏于数据）”为主题，与会嘉宾围绕行业趋势、核心技术及垂直行业应用等话题展开探讨，为AI浪潮下中国企业的数字化转型提供数据管理新范式。

2024-03-27 10:24:13

Denodo数据编织
绿色企业如何利用大数据？
当尝试创建绿色企业时，需要考虑很多事情。其中需要意识到的一件事是可持续性和技术的交集。提高绿色企业运营效率的方法之一是投资大数据。

2024-03-26 16:08:40

大数据绿色企业
大厂都要求的“数据分析闭环”，该如何实现？
完整的数据闭环，应该是：用数据监控业务 → 发现业务中的问题 → 分析问题原因 → 选择解决方案 → 继续监控业务走势，这样一条完整的链路。如果能实现闭环，肯定是做到了真正的数据驱动，既能体现数据分析的价值，又能促成业务科学办事，避免拍脑袋决策，是最好的状态了。

2024-03-26 11:37:08

数据分析业务
滴滴大数据资产治理实践
数据资产治理是大数据应用中的重要一环。有效的数据治理可以降本增效，提升数据利用效率。数据治理还需要平台化工具来辅助。本文将介绍滴滴出行在大数据资产治理方面的实践。

2024-03-26 06:46:52

大数据数据治理大数据资产治理
这是我见过最精准的预测模型
预测问题的背后，是一个很深层的业务问题：在很多公司，库存积压的损失是直观可见的，货都烂在货仓里。但缺货损失的潜在销量，却没有认真统计。想统计缺货损失很容易，可以让客户交定金预约，可以让客户登记需求量和需求时间。但很多公司业务要么懒，要么蠢，要么不想担责任，总之是没有做。

2024-03-26 00:54:42

预测模型数据
应对生成人工智能的挑战，数据治理要如何发展？ 译文 精选
生成式人工智能为组织如何获取和使用数据带来了新的风险、挑战和机遇。数据治理团队可以通过以下四种方式应对这一挑战。

2024-03-25 19:47:00

AIGC数据治理
八个常见的数据可视化错误以及如何避免它们
在当今以数据驱动为主导的世界里，清晰且具有洞察力的数据可视化至关重要。然而，在创建数据可视化时很容易犯错误，这可能导致对数据的错误解读。本文将探讨一些常见的糟糕数据可视化示例，并提供如何避免这些错误的建议。

2024-03-25 14:17:52

数据可视化数据驱动
大数据 AI 一体化解读
本文将从以数据为中心的模型开发、基础设施建设、数据分析应用等多个方面为您解读大数据 AI 一体化。在大数据和 AI 的推动下，近年来出现了一些非常令人欣喜的科技进展。

2024-03-25 08:15:02

数据分析AI 一体化大数据
人工智能技术在群聊类数据分析中的探索
随着互联网的快速发展，社交网络已经成为了现代人日常生活中不可或缺的一部分。其中，群聊作为一种集体交流的方式，承载了丰富多样的信息，从文字到语音，再到图片和视频，内容形式多样，且充满碎片化特性。

2024-03-22 14:56:43

人工智能数据分析
探讨大数据与供应链分析
大数据和供应链分析之间的合作具有巨大的潜力，可以彻底改变组织设计、管理和简化供应链的方式。本文深入探讨了与在供应链分析中利用大数据相关的关键概念、挑战、好处、应用和未来方向。

2024-03-22 09:56:48

供应链分析大数据
人工智能与数据分类和治理的重要作用
有些人对数据分类的含义感到困惑，毕竟，大多数存储的数据不是已经分类了吗?这可以更好地定义人工智能背景下的数据分类。数据分类涉及根据数据的性质、敏感性以及暴露或丢失的影响将数据分为不同类型。

2024-03-21 16:17:13

人工智能数据分类AI
现代数据堆栈需要彻底改革
现代数据堆栈已崩溃。从全球范围来看，平均每个组织使用130种不同的软件应用程序。由于有如此多的技术可用，数据管理很快就会变得复杂。

2024-03-21 15:54:00

数据堆栈数据管理数据结构
Ydata_profiling：自动生成数据探索报告的Python库
Ydata_profiling能够直接完成数据探索的工作，只需要几行代码，它会生成互动网页形式的报告，里面包含数据概览、字段分布、统计学特征、相关性、缺失值、样本信息等。

2024-03-20 08:37:34

数据处理Python数据分析
数据湖与数据仓库的区别
即使数据仓库和数据湖在大数据应用上有着许多共同的目标，但在处理方法、安全性、敏捷性、成本、架构、集成等方面存在一定的差异。

2024-03-19 13:45:27

数据仓库数据湖大数据
释放数据湖潜力：小红书如何实现数仓效率与成本的双重优化
为克服传统数据仓库在处理速度、灵活性和成本效率方面的局限，小红书数据仓库团队引入如 Apache Iceberg 等数据湖技术，将其与数仓架构相结合，以释放数据湖在查询性能、实时数据处理和成本效益方面的潜力。

2024-03-19 13:07:04

数据湖数据仓库
小红书离线数仓提效新思路，提升百倍回刷性能
现有以 Spark 为核心的数仓架构在处理大规模数据回刷方面已取得进展，但在资源和时间消耗上仍面临挑战。为了突破这些限制，小红书数据仓库团队将 StarRocks 融入到离线处理流程，替换掉部分 Spark 处理的任务，并优化较为耗时的 Cube 计算，大幅度提高了数据的执行效率。

2024-03-19 10:55:34

Spark
快手BI大数据分析场景性能优化实践
在信息化时代，大数据已经成为企业决策、市场分析、科研创新等众多领域的核心驱动力。随着数据规模的爆炸性增长，如何高效地处理和分析海量数据，实现性能的显著提升，成为各行各业迫切需要解决的关键问题。本文将为大家介绍快手大数据分析场景性能优化实践。

2024-03-19 09:24:00

大数据数据分析性能优化
大数据对银行战略的影响
在本文中，我们将深入研究大数据对银行战略的深刻影响，探索其含义、应用、挑战和未来前景。

2024-03-18 00:04:10

大数据银行
数据编排：性能是实现全球数据环境的关键
支持快速处理和来自不同存储孤岛的各种数据集的IT架构需要进行权衡。如今，非结构化数据编排汇集了来自多个供应商存储筒仓、地理位置的不同数据集和数据技术，而不会影响性能或安全的全球数据利用率。

2024-03-15 10:07:41

数据分析存储孤岛数据编排
流图计算在蚂蚁数仓加速场景的应用
数据仓库经过长时间的发展，技术体系已相对完善。传统数仓一般以表作为数据模型，来做数据建模以及数据的分析和处理。相比之下，图计算还是比较新的一门技术，主要是以图作为基本模型。本文将分享如何使用图计算以及图模型技术来解决传统数仓中的一些问题。

2024-03-15 07:21:33

数据仓库数据建模数据分析
数据分析师，定价模型怎么做？
现实的难点是：要怎么知道这个需求函数“Q=1000-4P”。本能的想法是：我先标个价格，比如100元，然后再降低到90、80、70、60……然后再提高到110、120、130、140，这样不就能测出来了？

2024-03-14 11:46:44

数据分析师定价模型
一个完整的数据分析体系，该长啥样？
在整个体系中，经营分析是直接服务于战略级决策的。在最高管理层做决策的时候，更聚焦于宏观的问题，比如整体目标达成，外部环境变化，内部举措效果。而不是陷在琐碎的业务细节里。

2024-03-13 13:46:44

数据分析体系
AI和大数据正在改变汽车行业的六种方式
从工厂车间到驾驶体验本身，人工智能和大数据正在推动更安全、更高效、更智能的汽车，以及更好的制造和维护流程。以下是人工智能和大数据重塑汽车版图的六种令人兴奋的方式。

2024-03-13 07:18:27

人工智能大数据汽车版图
超强，18 个必会的可视化技术
气泡图与散点图类似，但使用不同的气泡大小来表示附加维度。气泡图添加了一个视觉维度，可以根据销售量和比例来比较产品。

2024-03-13 00:00:01

可视化技术气泡图
腾讯欧拉平台数据血缘架构及应用
本文将介绍腾讯欧拉数据血缘的建设及应用。为什么要做数据血缘？主要有两个原因，一个是现状不能满足血缘数据需求，另一个是希望以血缘为基础做更多的事情。

2024-03-11 07:38:15

欧拉数据血缘数据应用数据治理
经营分析、数据分析、财务分析有什么关系？
从去年开始，经营分析迎来了一波文艺复兴，虽然并不是啥好事。企业经营压力加大，便开始加强对业务绩效的考核，加强对成本的控制。这个任务，有的公司交给数据分析师来办，有的交给财务，有的则由专门经营管理部承接。

2024-03-10 21:00:33

经营分析数据分析财务分析
到2028年，大数据市场预计将达到6380亿美元
大数据市场已成为数字化转型时代的关键，企业利用数据的力量来推动明智的决策。截至2022年，该市场估值达到令人印象深刻的2718.3亿美元，这反映了利用大量数据获得可行见解的重要性日益增强。

2024-03-08 13:07:45

大数据
数据科学家必备的六款数据可视化工具，颠覆传统图表！
在面对多元复杂的数据场景时，常见的图表类型可能并非最佳选择。本文中，笔者为大家总结了这些热门图表的几种替代方案。

2024-03-08 12:09:26

数据可视化图表
yyds！通向优秀数据分析师的六个阶梯
纵观整个成长阶梯，核心就是：数据分析师要能剥丝抽茧的解决复杂企业问题，这样培养能力，才是我们自己安身立命的法宝。

2024-03-07 12:54:06

数据分析师企业
解析大数据：从流数据摄取到交互式可视化的完整生态系统
“大数据”通常指的是传统数据库和处理工具无法处理的数据集，各种组件共同工作以处理、存储和分析这些大型数据集，这些组件共同形成一个大数据处理生态系统。

2024-03-07 12:53:00

大数据组件
商家可视化埋点探索和实践
埋点流程从明确需求到上线&验证共计上图 5 个步骤，手动代码埋点经历 v1.0 到 v2.0，减少了研发熟悉埋点流程、平台建节点、埋点 coding 成本，从前期产品随需求提出埋点诉求，到进入迭代进行需求开发，再到需求正式上线，并生效查看数据。

2024-03-06 19:57:56

探索商家可视化
长安汽车：基于云器 Lakehouse 的车联网大数据平台建设
近年来随着智能汽车行业的迅速发展，数据也在呈爆炸式增长。长安大数据平台承接了长安在生产上大部分流量应用及日常生产业务应用。本文将分享长安汽车在车联网场景下大数据平台建设面临的一些挑战和具体落地的实践。

2024-03-06 07:34:01

大数据车联网智能汽车
如何管理系统中的敏感数据？
当我们开发报告或数据源等数据产品时，需要设计一个流程来维护数据质量。在开发过程中，应授予数据开发人员必要的权限。数据上线后，应取消他们的数据访问权限。

2024-03-05 09:40:35

敏感数据流程
金融信创湖仓一体数据平台架构实践
本文将分享数新网络在金融信创领域湖仓一体数据平台架构方面的实践经验。湖仓一体架构则解决了这些问题，它整合了数据湖和数据仓库的优势，创建一体化和开放式的数据处理平台。

2024-03-05 08:21:23

湖仓一体数据湖数据仓库
大数据和物联网之间的关系以及如何互相帮助
大数据和物联网(IoT)有时被有些人混淆，特别是因为它们经常被放在一起讨论。但实际上，它们代表着两个截然不同的技术领域，而且经常重叠。

2024-03-04 11:12:20

大数据物联网
大数据分析的理解和探索
如今，云计算的热潮似乎还没散去，行业厂商就已经开始关注下一个热点：大数据。而与以往的炒作周期一样，现在的大数据对于用户来说其来源比较混乱，因为供应商提出了自己独特的，并且经常相互矛盾的定义和术语。

2024-03-04 11:10:01

大数据数据分析
这波操作看麻了！一亿行数据，从71s到1.7s的优化之路
当时看到这个成绩的瞬间，我人都是麻的，第一个疑问是：我靠，13G 的文件啊？1.5s 内完成了读取、解析、计算的过程？这不可能啊，光是读取 13G 大小的文件，也需要一点时间吧？

2024-03-04 08:29:33

数据定制化Java
新一代数据架构的性能与成本平衡之道
今天分享的主题是 Alluxio Local Cache 在 Presto 和 S3 上的实践，属于 Alluxio 的中间部分。NewsBreak 是美国的一家新闻资讯企业。文章将通过该公司案例，介绍Alluxio Local Cache for Presto 的应用。

2024-03-04 07:55:41

数据架构AlluxioNewsBreak
Data Fabric 在数据集成场景的实践
本文将介绍 Data Fabric 的基本概念及其在数据集成场景的实践案例。Data Fabric 到底是什么？Data Fabric 中文翻译成数据网格。而数据的虚拟化是实现数据网格化很关键的一项技术。

2024-03-04 07:34:32

数据网格数仓数据虚拟化
上一页 1 ··· 45678 ··· 181
点赞

51CTO技术栈公众号

业务
速览
在线客服