51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术25年5月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9088内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9088 条
大数据转型方案：首推数据湖！
作为大数据的变革新生力量，数据湖技术一经问世，便深受大厂青睐，纷纷推出自己的数据湖解决方案和相关产品，并已在广告数据分析、游戏行业等领域落地实行，效果显著。

2022-03-08 13:14:32

数据湖大数据
未来大数据时代下的智能交通是什么样的？
现在我们的城市交通系统还不够完美，你肯定能感受到早晚高峰的拥堵、交通事故的频发、交通中车辆的混乱等等，这些都是我们生活中常见的案例，让人烦不胜烦。这些问题可以解决吗，什么时候可以解决，这就涉及到智能交通。

2022-03-07 15:44:50

大数据智能交通技术
供应链分析的三个成功案例
供应链分析将从采购、库存管理、订单管理、仓库管理和履行、运输管理和其他运营应用程序中提取数据，为企业提供对其供应链每一步骤的深入了解。

2022-03-07 14:24:05

供应链分析大数据数据分析
大数据究竟有多“大”？谷歌搜索的规模为 62 PB，排名倒数第一
一位意大利物理研究者 Luca Clissa 调查了 2021 年几个知名大数据源（谷歌搜索、Facebook、Netflix、亚马逊等等）的规模大小，并将它们与大型强子对撞机（LHC）的电子设备所检测到的数据做了对比。

2022-03-07 11:03:08

大数据检测谷歌
元宇宙时代即将到来，你准备好了吗?
当下可能很多人会觉得元宇宙太过遥远，甚至有些虚幻，但其实新生事物的诞生与发展路径常有相似……

2022-03-07 10:35:30

元宇宙人工智能大数据
大数据在互联网领域的“九大”应用
大数据已经不简简单单是数据多、数据广的含义，而更重要的是对大数据进行分析，只有通过分析才能获取更多智能的，深入的，有价值的信息。

2022-03-05 23:15:38

大数据数据分析互联网
2022年的优秀数据管理平台和软件
由于数据管理平台种类繁多，因此寻找优秀供应商可能会很复杂，企业需要了解如何为业务数据需求选择正确的工具。

2022-03-04 14:24:20

数据管理平台大数据
如何打造一款极速数据湖分析引擎
本篇文章将向读者详细揭秘这样一套数据湖分析引擎的关键技术，并通过StarRocks 来帮助用户进一步理解系统的架构。

2022-03-04 09:05:55

StarRocks数据湖数据质量
浅谈企业数据能力建设
精细化产品改进和运营对企业应用数据的能力提出了很高的要求，因为这些改进决策的制定不能全凭经验，它们很大程度上还需要建立在坚实的数据分析结果之上。

2022-03-04 06:36:35

数据能力数据分析
大数据技术适合应用在哪些领域
大数据技术已逐渐成熟并广泛应用于各个领域，那大数据技术的应用领域有哪些呢？

2022-03-03 21:45:58

大数据大数据技术
数据湖三剑客，大数据时代的新范式？
目前的数据仓库技术出现了一定的局限性，比如单一不变的 schema 和模型已经无法满足各类不同场景和领域的数据分析的要求、流批一体的数据存储引擎和计算引擎适配问题以及Hadoop体系文件系统的ACID能力缺失等问题急需要解决，但就目前的技术栈而言，打破这些技术的桎梏，似乎多少有些力不从心，这个过程中，一项重大变革似乎在破晓前显得尤为必要。

2022-03-03 15:15:27

大数据数据湖技术
将数字孪生融入医疗保健领域的十大基本要素
本文从基础出发，探讨如何立足十大基本要素构建起适用于医学研究的数字孪生基础设施。文中具体解释了如何将API、图数据库、本体、电子健康记录等极具发展前景的技术融合起来，共同推进医疗保健行业的数字化转型。

2022-03-02 13:55:58

大数据数字孪生医疗保健
处理复杂的数据集成，你还在编写脚本吗？
当每个企业都在生成和访问多个数据源，集成平台可确保每个团队都拥有推动业务发展所需的数据。

2022-03-02 08:01:50

脚本数据集成
详解大数据批流处理中的两大架构
随着应用需求的不断发展，数据处理系统的能力也亟待提高。其中最为迫切的，便是如何利用云边协同计算平台的环境优势，实现高效的批流融合处理系统，从而低延迟、高吞吐地对全量历史数据与实时的流数据进行融合计算，为各行业的新型应用提供有力支撑。

2022-03-01 18:23:17

架构大数据系统
聊聊数仓建模之 ID Mapping
ID Mapping 就如同它的名字一样，我们要做的就是将一系列的ID 关联起来，尽可能地将用户的数据打通，从而提供更加全面准确的分析。

2022-03-01 17:16:16

数仓建模ID Mapping
知识图谱解锁隐藏的营销利器
Gartner预测，到2025年，图技术将用于80%的数据和分析创新，远远高于今年的10%。最终，知识图谱将协助营销人员实现目标，并增强企业的竞争优势，实现业务的全面成功。

2022-03-01 15:14:36

图数据库知识图谱
算法管理规定今施行 从三方面遏制“杀熟”
《规定》出台后，对网络销售、生活服务、社交娱乐、信息资讯、金融服务、计算应用等领域影响较大。

2022-03-01 10:25:20

算法大数据杀熟
Storm分布式实时大数据处理框架
按照storm作者的说法，Storm对于实时计算的意义类似于Hadoop对于批处理的意义。Hadoop提供了map、reduce原语，使我们的批处理程序变得简单和高效。

2022-03-01 08:40:34

StormHadoop批处理
什么是大数据战略以及如何构建
对于大数据，重要的不仅仅是数据量。数据量只是大数据的特性之一，这实际上是更容易解决的挑战之一。大数据更难的挑战与其他特性有关：数据类型的多样性、数据变化的速度、来自不同系统的数据的准确性，以及其他特性–使得企业难以处理大量不断变化的数据。

2022-02-27 15:28:53

大数据挑战战略
大数据时代应具备的思维方法
“十四五”规划纲要提出，要将数字技术广泛应用于政府管理服务，提高数字政府建设水平。

2022-02-25 15:49:13

大数据十四五应用
2022年企业应避免的十个大数据错误
本文介绍了企业在2022年应避免的十个大数据错误。我们一起来看一下都有那些吧。

2022-02-24 14:53:39

大数据安全数据集
九张图，看懂数据分析如何由浅入深
很多同学被嫌弃：做的数据分析，没深度。到底啥是分析深度？怎么才能做出深度？话不多说，直接上场景。

2022-02-24 11:49:18

数据分析业务数据
手把手教你搞定四类数据清洗操作
本文介绍数据清洗的相关内容，主要涉及缺失值清洗、格式内容清洗、逻辑错误清洗和维度相关性检查四个方面。

2022-02-23 20:53:54

数据清洗模型
想要做好数据可视化？你需要关注这三个问题
好的可视化能够帮助我们快速发现规律，找到原因；不好的可视化有可能会得出错误的结论，产生误导。想要做好数据可视化，先要明白“给谁看、看什么、怎么看”这三大问题。

2022-02-23 15:17:12

SQL数据集数据分析
Spark 数据倾斜及其解决方案
『不患多而患不均』，这是分布式环境下最大的问题。意味着计算能力不是线性扩展的，而是存在短板效应: 一个 Stage 所耗费的时间，是由最慢的那个 Task 决定。

2022-02-23 12:07:20

分布式Spark数据倾斜
用 Pandas 做 ETL，不要太快
TL 的全称是 extract, transform, load，意思就是：提取、转换、 加载。ETL 是数据分析中的基础工作，获取非结构化或难以使用的数据，把它变为干净、结构化的数据，比如导出 csv 文件，为后续的分析提供数据基础。

2022-02-22 09:25:11

PandasETL数据分析
数据分析八大模型：漏斗模型
今天跟大家分享的是漏斗模型。漏斗模型，是一个大家能在各式各样的场合听到，但是总是感觉没讲到位的模型，今天简单分享一下。

2022-02-21 17:35:50

漏斗模型流程数据
从盘古开天辟地说起为什么 Flink CP 能实现精确一次之二
本文主要讲了一个分布式应用异步做一个全局一致性快照的机制。

2022-02-20 10:47:54

Flink CP通用算法实时数仓
面试官：Hive表有数据，但为什么 Iimpala 查询不到数据？
我们知道，distribute 是分配、分布的意思，顾名思义，hive中（distribute by + “表中字段”）关键字就是控制map输出结果的分发,相同字段的map输出会发到一个reduce节点去处理。

2022-02-19 21:36:05

Hive数据，节点
八个算力枢纽，十大数字中心集群！国家级「东数西算」工程解读
信息时代，算力就是生产力。近日，国家发展改革委等多部门联合发出通知，「东数西算」国家级系统工程全面启动！

2022-02-19 18:23:41

计算网络数据
从盘古开天辟地说起为什么 Flink CP 能实现精确一次？
对于很多做离线或者实时数仓的小伙伴来说，我先问几个问题，看看小伙伴萌能回答上来吗？

2022-02-19 09:09:37

数仓Flink CP分布式
升级版的Vlookup你用过吗？自动获取第三参数，一次查找多列数据
Hello，大家好，今天我们来解决一个vlookup的痛点，相信很多人都遇到过，先来看下今天的例子，如下图所示，当我们需要查找多列结果的时候，只能使用vlookup来一列一列的查找，非常的耗费时间，那么有没有什么方法能使用一次vlookup就能找到所有的结果呢?

2022-02-18 10:26:42

vlookupMatch函数查找
数据仓库之数仓治理
数据治理（Data Governance），是一套持续改善管理机制，通常包括了数据架构组织、数据模型、政策及体系制定、技术工具、数据标准、数据质量、影响度分析、作业流程、监督及考核流程等内容。

2022-02-18 09:02:04

数据仓库治理
什么是 Azure Synapse，它与 Azure Data Bricks 有何不同？
zure Synapse Analytics 是一项针对大型公司的无限信息分析服务，它被呈现为 Azure SQL 数据仓库 (SQL DW) 的演变，将业务数据存储和宏或大数据分析结合在一起。

2022-02-17 22:28:39

数据仓库SQL大数据
定价模型，该如何做分析？
在数据领域，有很多“书上一讲就明白，实际一干就报废”的知识点，因此同学们才有这种疑惑。趁着开年，系统帮同学们解答一下，后续工作、面试都用得上。而在众多理论里，定价模型是最常见的一个。

2022-02-17 13:18:58

定价模型营销AHP
浅谈我所见识的数据治理项目
都说数据治理项目是“一把手工程”，是“永不交钥匙工程”，一把手真的比门把手都忙，先想想：咱真的需要进行数据治理吗?

2022-02-17 11:29:17

数据治理项目数据使用
一篇带你了解OLTP vs. OLAP
OLTP是传统的关系型数据库的主要应用，主要是基本的、日常的事务处理。OLAP是数据仓库系统的主要应用，支持复杂的分析操作，侧重决策支持，并且提供直观易懂的查询结果。

2022-02-17 08:35:59

OLTPOLAP数据仓库
一文看懂：互联网产品分析，该如何做？
总有同学们在抱怨：“说的是做产品分析，可实际上每天都在埋点，建表，写SQL，对口径，找bug，我分析啥了？到底啥是产品分析？”今天简单分享一下。

2022-02-16 18:24:38

互联网产品分析
如何培养数据分析思维？
培养数据分析思维不仅对找一份和数据分析相关的工作有帮助，在日常生活中同样会有帮助。今天的内容会从以下几个方面进行分享。

2022-02-16 10:37:41

数据分析思维数据分析
全球大数据市场将在未来出现大幅增长
无论是数据增长、市场增长或就业增长，目前在大数据市场都有大量的事情发生，这意味着这是专业人士从事大数据业务的大好时机。

2022-02-16 10:36:40

大数据数据增长大数据业务
2022年数据治理和运营安全领域的发展趋势
网络安全服务商Satori公司日前分享了对基于云计算的转型的预测，并介绍了2022年数据治理和运营安全领域需要关注的三大发展趋势。

2022-02-16 08:28:17

云计算数据治理运营安全
浅谈大数据技术在天体系统运行状态监测中的应用
大数据技术在天体系统运行状态监测中的应用主要集中在海量数据的采集存储、分析挖掘、可视化等领域。

2022-02-15 15:34:10

大数据天体系统技术
商业智能在物流和运输中的应用
如今，几乎每个行业都能感受到商业智能的重要性。企业采用商业智能将其业务生成的数据转换为具有价值的信息，从而可以更好地控制和运营，并促进战略决策。

2022-02-15 10:48:33

物流大数据商业智能
大数据替代不了你做决定
大数据是流行的，但是大数据替代不了你的决定，做决定还是靠你自己！

2022-02-14 23:43:33

大数据风险数据
为什么2022年仍然存在数据孤岛?
如果本文有一个关键要点的话，那就是需要了解数据孤岛在哪里，为什么要创建它们，以及如何与员工合作以释放他们的数据。

2022-02-14 13:59:47

数据数据孤岛大数据
数据中心如何向 400G/800G 迁移？
应对未来数据中心挑战的计划从现在开始……

2022-02-11 15:30:53

大数据数据中心综合布线
2022年的五个大数据趋势
云计算带来了一种新的基础设施模式，它将帮助我们快速地、程序化地、按需地建立这些数据栈，使用像Kubernetes这样的云原生技术、像Terraform这样的基础设施即代码以及DevOps的云计算最佳实践。因此，基础设施成为构建和实施现代数据栈的一个关键因素。

2022-02-10 22:54:25

大数据云计算技术
面向B端算法实时业务支撑的工程实践
为什么要选择Blink？大部分离线场景如果对于时效性没有要求，或者数据源是Batch模式的，非Streaming的(比如TT、SLS、SWIFT、顺序)等，这个场景的话选择ODPS就比较不错；总体来说，数据源是实时的(如TT/SLS/SWIFT)、需要顺序读取ODPS、对时效性要求高的场景，选择Blink是比较好的。

2022-02-10 08:16:52

算法业务ODPS
如何构建一个流量无损的在线应用架构
文中很多场景和技术点都是来源于真实的线上系统的真实故障。我们将这些年在每一个环节中的相应解决方案，以产品化的方式沉淀到企业级分布式应用服务（EDAS）中。

2022-02-10 07:03:32

流量应用架构数据交换
什么是工业大数据？工业大数据的价值体现在哪些方面？
随着新一代信息技术与制造业的深度融合，工业企业的运营管理，越来越依赖工业大数据。工业大数据的潜在价值也日益呈现。随着越来越多的生产设备、零部件、产品以及人力物力不断加入工业互联网，也致使工业大数据呈现出爆炸性增长的趋势。

2022-02-09 21:53:13

大数据工业大数据
上一页 1 ··· 3132333435 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服