51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术25年5月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9065内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9065 条
什么是数据可视化？怎样引入Syplot模块？
可视化最早应用于计算机科学中，后形成了计算科学的一个重要分支——科学计算可视化。科学计算可视化将测量或计算产生的数字信息以图形图像的形式呈现给研究者，使他们能够更加直观地观察和提取数据表示的信息。

2023-03-09 15:11:30

数据可视化工具matplotlib
天花板！商业分析模型超强总结
做生意要赚钱！这是商业基本法则。因此商业分析模型，大多围绕利润（Total Profit，记为TP）、收入（Revnue、记为R）、成本（Cost记为C）展开。利润=收入-成本，是最基本的公式。

2023-03-09 13:56:00

商业分析模型Revnue
浅谈AB实验及其在转转B2B报价系统中的应用
P 值是当原假设为真时，所得到的样本观察结果或更极端的结果出现的概率。如果 P 值很小，说明这种情况发生的概率很小，但是在这次试验中却出现了，根据小概率原理，我们有理由拒绝原假设，P 值越小，我们拒绝原假设的理由越充分。

2023-03-08 08:31:35

AB实验报价系统
大数据Hadoop之EFAK和Confluent KSQL简单使用
kafka 0.9.x以后的版本新增了advertised.listeners​配置，kafka 0.9.x以后的版本不要使用 advertised.host.name 和 advertised.host.port 已经deprecatedhost.name 和 port 为 deprecated，使用​listeners代替。

2023-03-08 07:25:08

HadoopEFAKKSQL
如何做好一场NPS调研？
我们要学会充分利用这些“珍贵用户”，大胆的邀请他们加入产品的后续互动：问题回访、用户访谈或者新功能内测体验等等……他们大概率不会拒绝我们的邀约，而且后续的互动会更加提升他们的参与感，为产品获得更多的拥护者。

2023-03-07 17:53:00

NPS调研
彻底销毁！这地10亿条个人涉疫数据被清理 原创 精选
近期，素有“江南胜地”之称的江苏无锡，举办了一场“特别”的仪式，为这一问题提供了可行答案。

2023-03-07 17:50:03

个人涉疫数据
智能建筑需要数据支持吗？
智能建筑和空间需要数据驱动的价值链，包括建筑管理、可持续发展目标和用户体验。而首席信息官们需要建立一个基于公共数据环境的整体框架，以实现效率、预测性管理和创新服务能力。智能建筑需有一个“数据流结构”，与建筑的重点保持一致。

2023-03-07 14:40:57

智能建筑大数据
从0到1，搭建经营分析体系
经营分析最大痛点，在于很多人做的“既不经营，也没啥分析”，基本就是按：GMV=UV*转化率*客单价的公式，把KPI一拆，然后开始表演：“本月目标未达成，原因是转化率低了，要搞高。”并且很多公司的经营分析报告是有模板的，美其名曰：“历史传承”。于是这个“要搞高”就传了一代又一代。

2023-03-06 11:35:55

经营分析体系
谈谈数据的货币化
人们对隐藏宝藏的想法很感兴趣。藏在尘土飞扬的阁楼中的无价绘画和珍贵古董的故事激发了热情，并给了我们找到金票的希望。不幸的是，我们家中的大多数垃圾确实是垃圾，而且只值几分钱而不是数百万。

2023-03-06 00:20:42

数据资产货币数据货币
产品分析，有经验的人都这样做
战略层的分析，理应是最先开始，最先需要明确的分析。因为后续每一个具体功能，每一项具体设计，每一次迭代优化，都是为了达成战略目的服务的。但是这恰恰是很多产品分析最缺的部分。

2023-03-05 17:40:00

产品分析转化率活跃率
来说说，什么才是真正的大数据分析
数据是如此重要，以至于历史上很长一段时间，统计任务归属于政府、军队、情报机关。我国的第一家调查公司还是在90年代初，在宝洁强烈要求下成立的。

2023-03-04 21:31:57

大数据采集抽样式
数字孪生在建筑中有多重要？
首先，让我们用“资产”这个词来说明围绕数字孪生的困惑。资产被定义为有价值的东西，可以是金融的，也可以是实物的，并且可以根据上下文描述许多不同的东西。金融资产可以指品牌、现金、库存、股票、债券等。实物资产可以指车辆、建筑物、水泵等设...

2023-03-03 15:20:56

数字孪生
通向优秀数据分析师的六个阶梯
纵观整个成长阶梯，核心就是：数据分析师要能剥丝抽茧的解决复杂企业问题，这样培养能力，才是我们自己安身立命的法宝。

2023-03-02 11:51:00

数据分析师企业
使用手工特征提升模型性能
本文将使用信用违约数据集介绍手工特征的概念和创建过程。

2023-03-01 15:14:48

数据集机器学习
谈谈将数据作为战略资产管理
在任何组织中，领导者的角色都是确定并清楚地传达组织的愿景、使命和价值主张。以此愿景为基础，确定短期、中期和长期战略目标，并将愿景贯彻执行。作为战略举措的一部分，当业务环境发生意外变化时，应主动制定应急计划。

2023-02-28 16:07:18

数据资产数据分析
火山引擎DataLeap数据血缘技术实现与具体用例
本文介绍的数据血缘能力和实践，目前大部分已通过火山引擎DataLeap对外提供服务。

2023-02-28 07:22:14

数据血缘能DataLeap
分析指标波动，数据模型得这么建
数据分析需要跑数，但想解读跑出来的数，需要的是掌握丰富的事实情况，用数据量化评估其中可量化的部分，监控其中持续发展的部分，拆解其中模糊部分，从而越来越接近真相。

2023-02-26 17:46:03

分析指标波动数据模型
T3 出行基于 Hudi+Kyuubi 的现代技术栈探索
在本文中，我将给大家分享下 T3 出行结合公司业务场景，在现代技术栈这方面，做的一些探索于与实践，以及在此基础上打造的特征平台。

2023-02-26 11:07:48

数据湖现代数据栈
大数据Hadoop之——Apache Hudi 数据湖实战操作（Spark，Flink与Hudi整合）
Hudi（Hadoop Upserts Deletes and Incrementals）​，简称​Hudi​，是一个流式数据湖平台，支持对海量数据快速更新，内置表格式，支持事务的存储层、 一系列表服务、数据服务(开箱即用的摄取工具)以及完善的运维监控工具，它可以以极低的延迟将数据快速存储到HDFS或云存储（S3）的工具，最主要的特点支持记录级别的插入更新（Upsert）和删除，同时还支持增量查询

2023-02-26 00:12:10

Hadoop数据湖存储
一文快速解锁：标签体系全流程
标签体系做得好，后续分析才有足够多素材，才能积累经验。标签体系做得差，白费功夫不说，后边做深入分析的时候还没有依靠。

2023-02-26 00:00:04

项目标签体系
数据分析报告，【建议】部分该怎么写？
当然，这些都建立在一个基本前提上：你得能分清看到的是结果数据还是过程数据。曾经有个同学问陈老师：“老师，我要如何提升策略性思考能力，你看我们现在明明一切做得很好，可转化率就是上不去，为啥嗯？”

2023-02-26 00:00:03

数据分析数据模型
Presto+Alluxio 加速 Iceberg 数据湖访问
本文将分享 Alluxio 社区和 Presto 社区在数据湖方面的一些工作，主要聚焦 Iceberg。

2023-02-25 10:17:28

数据湖Hive 数据仓库
得物供应链复杂业务实时数仓建设之路
得物供应链业务是纷繁复杂的，我们既有JIT的现货模式中间夹着这大量的仓库作业环节，又有到仓的寄售，品牌业务，有非常复杂的逆向链路。在这么复杂的业务背后，我们需要精细化关注人货场车的效率和成本，每一单的及时履约情况，要做到这一点我们需要各粒度和维度的数据来支撑我们的精细化管理。

2023-02-24 18:47:37

供应链实时数仓
一文详解Python数据分析模块Numpy切片、索引和广播
ndarray对象的内容可以通过索引或切片来访问和修改，与 Python 中 list 的切片操作一样。

2023-02-24 14:40:24

ndarrayPython数据分析
使用深度学习模型生成合成数据 译文
合成数据仓库（SDV）是一个生成合成数据的生态系统，允许用户通过了解单表、多表、文本和时间序列数据集，轻松创建合成数据。SDV使用概率图形模型和深度学习技术来生成合成数据。

2023-02-23 07:46:48

学习模型数据仓库
2023年有哪些数据分析和商业智能发展趋势？
随着2023年的到来，现在是探索数据分析和商业智能在新的一年发展趋势的好时机，本文将介绍数据分析和商业智能的一些发展趋势。

2023-02-22 15:57:41

数据分析商业智能
智能建筑的数据集成架构
数据集成架构提供了一种组织、协调和呈现建筑数据的方法，通过有效集成，数据可以提高建筑性能、利益相关者之间更顺畅地协作，并提高顾客满意度。

2023-02-22 10:08:34

数据集成智能建筑
介绍一个有趣的可视化工具，超Q！
今天我们介绍的可视化工具是 cutecharts[1]，这是一个纯 Python 语言编写的可视化工具，就像其名字一样，这是一个可以产生 cute 版图表的工具。

2023-02-21 08:02:09

可视化工具图表
2023中国国际大数据产业博览会新闻发布会召开
贵阳贵安作为国家大数据综合试验区核心区，以实施“强省会”行动为主抓手，加快建设数字经济发展创新区，已成为西部地区唯一入选建设信息基础设施和推进产业数字化成效明显市（州），全世界聚集超大型数据中心最多的地区之一。

2023-02-20 15:01:19

数博会数据中心
腾讯广告模型基于"太极"的训练成本优化实践
近年来， 随着大模型在 NLP 领域横扫各种大数据磅单取得巨大成功之后，大数据加大模型成为了 AI 领域建模的标准范式。搜索、广告、推荐的建模也不例外，动辄千亿参数，上 T 大小的模型成为各大预估场景的标配，大模型能力也已经成为各大科技公司军备竞赛的焦点。

2023-02-20 13:50:39

AI 领域建模大数据
腾讯Alluxio（DOP）在金融场景的落地与优化实践
本文将分享腾讯 Alluxio（DOP）在金融场景的落地和优化实践。DOP 全称为 data orchestration platform，数据编排平台，是腾讯内部 Alluxio 及其生态产品组成的一个大的产品。

2023-02-20 13:45:31

数据分析腾讯 Alluxio
大数据分析如何重塑物联网(IoT)?
大数据和物联网正在推动科技进步，让生活变得更快、更智慧。为了收集数据，物联网可以将任何产生数据的东西连接到互联网，包括汽车、可穿戴技术、视频游戏、家用电器和其他物体。

2023-02-17 16:25:58

大数据分析物联网
时间序列数据库的数据集成策略 译文
时序数据带来了额外的复杂性。从本质上讲，每个时序数据点的值会随着时间的推移而减少，因为数据的粒度会随着数据过时而失去相关性。因此，团队必须仔细规划数据集成到时间序列数据库 （TSDB） 中的策略，以确保分析近乎实时地反映趋势和情况。

2023-02-16 17:44:13

时序数据库CDCETL
2023年的四个大数据发展趋势
企业对数据科学家的需求也呈指数级增长。许多人预测，在未来五年内，这将是最受欢迎的职业。无论专业领域如何，基础数据科学技能都可以为企业提供在该领域开始充满活力和有前途的职业生涯所需的广泛知识。以下将探讨2023年的一些大数据趋势。

2023-02-16 13:46:36

大数据数据科学
使用Pandas也可以进行数据可视化
数据可视化是数据分析的一个重要方面，它提供了一种理解数据并从中得出有意义见解的方法。Pandas 是最常见的于数据分析的 Python 库，它基于Matplotlib扩展了一些常用的可视化图表，可以方便的调用，本篇文章就让我们看看有哪些图表可以直接使用。

2023-02-15 08:24:12

数据分析数据可视化
大数据已死！从业10年老哥爆文抨击：这套唬不住客户了
Jordan Tigani认为——如果大数据真是未来，那情况应该不一样。

2023-02-15 08:24:00

大数据
连接数据与技术，改造智能建筑
当我们拥有无法理解或无法关联的数据时，可能根本就没有数据。孤立的数据正在削弱智能建筑，我们需要管理运营技术的组合，将多个数据源和不同的系统结合在一起，以推动价值。

2023-02-14 14:33:54

连接数据智能建筑
春节大数据看2023年中国经济走向
中国电信融合运营商、互联网和产业经济数据，分析春节期间（2023年1月7日-2023年2月5日）产业发展状态，展望2023年经济走向。

2023-02-13 23:48:12

大数据运营商经济
为什么数据能力对网络智能至关重要
众所周知，网络情报专家必须具备数据工程技能。但数据工程到底是什么？

2023-02-13 16:44:09

数据工程大数据集网络情报管道
B站基于缓存优化 PRESTO 集群查询性能
本次分享主题为 B 站 Presto 集群查询性能的优化，首先会简单介绍 Presto以及 B 站内部 Presto 集群的架构。接下来讲解针对 Presto 做的改造，主要是 Presto 搭配 Alluxio 和 Presto 搭配 Alluxio local cache 的使用。最后会对后续计划开展的工作做简要说明。

2023-02-13 09:48:00

PRESTO 集群缓存优化
数据隐私在智慧城市中的重要性
数据隐私是现代社会的一个重要方面，在智慧城市的背景下尤为重要。

2023-02-10 10:58:41

智慧城市数据隐私
谈谈12个最常见的数据质量问题及其来源
据调查，56%的组织面临至少四种不同类型的数据质量问题，而71%的组织面临至少三种不同类型的问题。组织在设计数据质量框架和解决数据质量问题时花费了大量时间和资源。但要获得良好的结果，了解这些问题的确切性质并首先确定它们如何最终出现在系统中是很重要的。

2023-02-09 15:33:48

数据质量数据集
数据分析终极一问：多影响因素下，到底咋归因？！
新入行的数据分析师，认为只要怼几个数据进线性回归或者因子分析模型，就能算个参数出来让每个部门满意。所以这种来来回回扯皮的事，还会延续很多很多年，哈哈哈。

2023-02-09 12:15:49

数据分析因素售后
可扩展的图神经结构搜索系统
随着工业界对于大规模图数据处理场景的要求，图结构数据处理的及时性和可扩展性成为了行业关注的重点。今天要主要介绍 PaSca，一种基于新型结构范式的可扩展的图神经结构搜索系统，并且探讨其表现性能和易用性。

2023-02-09 09:08:44

PaSca图结构数据处理
网易云音乐全链路埋点管理平台建设
我们围绕这套埋点方案研发了配套的埋点管理系统，以承载及埋点规则数据管理、埋点设计、埋点研发、埋点测试、埋点上线等功能，本文主要介绍该平台功能及建设思路。

2023-02-08 19:37:37

大数据技术
网易云音乐数据全链路基线治理实践
在大数据开发领域，大家都会被一个问题困扰：调度任务延迟，然后被老板、被业务“灵魂拷问”。本文将从问题挑战、目标衡量、行动方案、成果展示、后续规划五个方面展开，详述网易云音乐在全链路基线治理的实践。

2023-02-08 19:32:27

大数据
2023年大数据技术的四大挑战与十大趋势
在大数据应用需求驱动下，计算技术体系有必要进行重构，以数据为中心的新型大数据系统技术成为重要方向，信息技术体系将从“计算为中心”向“数据为中心”转型。

2023-02-08 15:28:55

大数据技术
用于文本数据分析的 Pandas：使用 Str 访问器清理和操作文本数据
Pandas 中的 str 访问器提供了许多有用的字符串操作，可以应用于 Pandas 系列的每个元素。

2023-02-08 07:44:56

Pandas数据分析
运营策略分析体系，该如何搭建
数据分析师连发生了什么都是后知后觉，数据没有做标记，活动规则之间相互重叠毫无策略可言，又能做什么分析呢？

2023-02-07 13:27:00

运营策略分析
肯睿（Cloudera）：2023年影响业务重心的四大技术趋势
随着越来越多的行业在数字化方面趋于成熟，混合云、人工智能（AI）、机器学习（ML）等新兴技术将越来越多地用于提高运营效率和降低成本。因此，我们认为2023年对于想要充分利用混合云强大潜力的企业来说将是关键的一年。以下四大技术趋势将在未来一年极大地影响业务重心。

2023-02-07 11:56:03

混合云人工智能机器学习
上一页 1 ··· 1819202122 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服