51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术25年5月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9065内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9065 条
较ClickHouse降低50%成本，湖仓一体在B站的演进
ClickHouse是一款非常优秀、综合能力非常强大的OLAP引擎，基本可以覆盖数据分析的各种场景的需求。

2023-04-19 15:52:15

ClickHouse大数据
小红书基于数据湖的流批统一存储实践
今天分享的主题是基于流存储与数据湖打造小红书流批统一存储。

2023-04-18 07:49:06

流存储数据湖
基于 Echarts 的数据可视化在异构数据平台的实践
为了提供敏捷高效的数据分析模式，助力广大开发者（研发人员、数据分析师、数据科学家等）体验高效数据处理服务，炎凰数据推出了一站式异构数据分析平台——鸿鹄。鸿鹄提供了从数据的接入、存储查询到上层应用的整体解决方案，本文将分享如何利用鸿鹄来实现数据价值的可视化呈现。

2023-04-17 07:32:41

数据分析数据可视化
数据治理的关键：元数据治理如何开展
谈到元数据管理的问题，我们可以从一个基本问题开始，元数据到底是什么，它为什么重要？简单地说，元数据是描述其他数据的数据。它就像一瓶罐头上的标签——它告诉你里面有什么以及如何使用它。

2023-04-14 15:50:29

元数据数据治理
Kyligence Zen GA 版正式发布：以人人可用的指标平台，助推千行百业数字化转型 原创
Kyligence 于4 月 11 日召开指标平台产品发布会，推出了Kyligence Zen GA 版，以更加完善、成熟和稳定的产品特性，为千行百业提供好用、敏捷的一站式指标平台。

2023-04-13 15:38:32

Kyligence一站式指标平台
翼支付云原生数据开发与治理平台实践
本文主要分享翼支付在大数据平台建设与研发方面的经验。

2023-04-12 07:26:58

翼支付大数据平台
主数据管理如何改变企业的销售和营销工作
在当今竞争激烈的行业环境中，企业需要在竞争中占据优势，而其优势就是知识，也就是了解客户、他们的行为和他们的喜好。创建自动执行数据验证、验证和充实的健壮数据环境的能力不再是一种选择。

2023-04-11 15:28:26

数据管理数据环境
推动业务成功：释放数据集成的力量
在当今的数字世界中，数据已成为企业必不可少的资产。数据集成推动了许多业务的成功，因为企业不断从不同来源收集和生成大量数据，例如销售交易、社交媒体活动和客户互动等。

2023-04-11 15:12:39

数据集数据仓库
一文看懂：如何建立评估模型
数据分析要结合业务。实际上业务流程是非常复杂的，并且业务经常忽视数据采集。数据结合业务，不但要了解业务流程，更要参与到业务当中，主动优化数据采集，不但事后分析有米下锅，业务自己也能自证清白，从而实现双赢。​

2023-04-10 11:35:31

评估模型业务流程
中原银行如何从0到1建设敏捷BI平台？
本文将分享中原银行在敏捷 BI 平台上的建设实践。文中主要讲解中原银行如何从零到 1 建设整个 BI 体系。

2023-04-10 07:40:50

BI 体系数据中台
数据治理体系建设与实践
本文将分享滴普科技在数据治理方面的实践与总结。

2023-04-10 07:34:30

数据治理业务数字化
如何使用增强分析简化复杂数据？
增强分析是一种通过使用人工智能和机器学习来自动化和改进数据分析的工具。这些工具可以自动识别见解、生成预测并为这些预测提供原因。它有可能解决由数据复杂性引起的任何挑战。

2023-04-07 14:04:52

增强分析人工智能
快手增长渠道数据产品实践
渠道产品主要服务于业务，是基于业务思考的逻辑延伸出的产品。本文将探讨增长渠道数据产品。

2023-04-07 07:31:17

渠道数据
Gartner调查显示，只有不到一半的数据和分析团队能够有效地为企业机构提供价值
Gartner高级研究总监Donna Medeiros表示：“D&A是一项提高利益相关者价值的业务。取得巨大成功的首席数据和分析官（CDAO）超越同行之处在于，他们通过展示他们的执行力和建立一个灵活和战略性的D&A职能，塑造数据驱动的业务绩效和卓越的运营。”

2023-04-06 15:18:56

数据驱动数据和分析
经营分析、数据分析、财务分析有什么关系？
从去年开始，经营分析迎来了一波文艺复兴，虽然并不是啥好事。企业经营压力加大，便开始加强对业务绩效的考核，加强对成本的控制。这个任务，有的公司交给数据分析师来办，有的交给财务，有的则由专门经营管理部承接。

2023-04-06 11:54:55

经营分析数据分析财务分析
通过 Docker-Compose 快速部署 Hive 详细教程
通过 docker-compose 部署的服务主要是用最少的资源和时间成本快速部署服务，方便小伙伴学习、测试、验证功能等等~

2023-04-06 07:18:14

HiveHadoop测试
火山引擎 DataLeap 数据血缘技术建设实践
本文介绍的数据血缘能力和实践，目前大部分已通过火山引擎 DataLeap 对外提供服务，欢迎大家点击阅读原文体验。

2023-04-04 13:38:30

DataLeap数据血缘
经得起未来考验的大数据战略
随着大数据的应用越来越广泛，为企业提供了众多优势，技术领导者必须避开普遍存在的误解，接受新兴趋势，才能保持在技术创新的前沿。

2023-04-03 14:25:08

大数据机器学习
数据治理驱动下的开发治理平台建设
大数据开发治理平台是在大数据生态组件之上，提供海量数据的传输、存储、查询分析、开发测试发布、管理、运维的一站式开发分析治理平台，服务于公司内部对数据有需求的各种角色成员。

2023-04-03 07:49:11

大数据数据治理
飞猪旅行场景下的实时用户理解服务
本文将分享飞猪旅行场景下的实时用户理解服务，简称 RTUS。

2023-04-03 07:38:36

智能搜索数据分析
分布式时代已至，数据如何更有价值？
无论是连通各大集群内大型超大型数据中心，还是连接边缘侧小型、边缘数据中心，分布式云计算都已成为这张算力网络最重要的支撑。在此背景下，云计算步入分布式时代。

2023-04-02 21:34:48

大数据云计算
这个ChatGPT插件可以远程运行代码，还生成图表
我们做数据分析时一般都是使用这样的流程来进行：运行jupyter notebook、安装库、解决依赖关系和版本控制，数据分析，生成图表。ChatGPT的“Code Interpreter”插件可以帮助我们进行数据分析。

2023-04-02 14:13:52

人工智能ChatGPT数据分析
你不知道的！Hadoop 十大事实揭秘
HDFS 不仅可以处理非常大的分布式文件，而且还可以处理不同类型的文件。这个过程相当简单，任何类型和大小的数据都可以使用在 HDFS 中构建的非常简单和直接的过程进行存储（集中或分布式）和管理。

2023-03-31 18:37:29

Hadoop分布式文件
2023数据科学峰会百分点科技正式发布数据科学基础平台
3月30日，由百分点科技主办的“2023数据科学峰会”在北京金隅智造工场·科技秀场成功召开。此次大会以“数据·进阶”为主题，邀请权威专家学者以科学视角和全球视野解读数据科学、数字政府建设及数字化业务，在现场重磅推出一站式数据价值实现平台，并联合全球权威咨询机构IDC发布首份数据能力进阶白皮书。

2023-03-31 09:08:33

百分点数据科学
聊聊 HDFS Balancer负载均衡器
平衡指的是 每个DataNode的利用率 与 集群的利用率 之间相差不超过给定的阈值百分比。此处的平衡 指的是各个DataNode之间的平衡，同一个DataNode之间的各个磁盘是不会平衡的。

2023-03-30 13:32:51

负载均衡器HDFS
Hive 和 Spark 分区策略剖析
随着技术的不断的发展，大数据领域对于海量数据的存储和处理的技术框架越来越多。在离线数据处理生态系统最具代表性的分布式处理引擎当属Hive和Spark，它们在分区策略方面有着一些相似之处，但也存在一些不同之处。

2023-03-30 09:06:20

HiveSpark大数据
抖音集团数据指标体系分析与增长实践
增长实际上是一个老生常谈的话题了，大家都很熟悉，但在实践过程中仍然有很多的疑问。比如指标体系应该怎么搭建，如何通过数据分析找到关键瓶颈，找到之后又应该怎么做等等。今天就是针对这些问题来进行分享。

2023-03-28 08:28:34

数据分析数据指标体系
电商领域A/B实验平台建设方法
本文将介绍实验平台建设及应用的相关经验与思考。

2023-03-28 08:16:05

A/B实验数据分析
我们一起学习Hdfs的异构存储
在我们实际的开发过程中，我们的某些数据可能经常使用，但是过了一段时间，这个数据就不怎么使用了，即我们的数据存在一个热、温、冷等这些特性。那么针对数据的热度，我们可以采用不同的策略，存储到不同的存储介质上。

2023-03-28 07:32:37

异构存储hdfs
经营分析，如何洞察业务痛点
一提到“洞察痛点”很多人本能就把指标达成率给列出来了，然后写到“本月A部门销售严重不达标！”还有些人会做拆解（如下图所示）拆完了说：“因为A部门新用户不行，建议把新用户搞多！” 这算是洞察到痛点了吧。

2023-03-27 11:37:29

经营分析业务销售
众安金融实时特征平台架构设计与实践
随着企业数字化转型升级，线上业务呈现多场景、多渠道、多元化的特征。数据要素价值的挖掘可谓分秒必争，业务也对数据的时效性和灵活性提出了更高的要求。在庞大分散、高并发的数据来源背景下，数据的实时处理能力成为企业提升竞争力的一大因素。今天分享的是众安金融实时特征平台实践。

2023-03-27 08:05:27

数字化转型MLOps
深度揭秘，为什么你做数据分析没思路？
有些公司环境就是不好，导致同学们在工作中总是被PUA“你思路不清楚呀”。这时候，大家只要做好自己本职工作，多积累具体问题点上的实操经验，就有机会跳槽离开这种脑残公司，找到更合适自己的工作。所以细节讨论是很重要的，不考虑细节，流于理论或者流于表面，就会像本文开头一样出洋相了。​

2023-03-26 19:18:27

数据分析思路
toB和toC业务，数据分析有何异同？
toB和toC业务是完全不同两大场景。toC业务面对的是个人的衣食住行的需求，离我们的生活很近。经常我们把自己当做消费者思考一下，就能理解toC业务是做什么的。而toB业务则是服务企业生产经营，很多同学不能直观理解。

2023-03-26 18:56:40

toBtoC业务
人工智能和大数据如何协同工作？
尽管这两种技术的运作方式不同，但它们可以很好地协同工作，因为人工智能需要海量数据来产生智能。同时，大数据为人工智能提供了大量数据。本文解释了大数据和人工智能之间的关系，以及它们如何共同解决企业问题。

2023-03-24 14:51:05

人工智能大数据
数据分析前置工作指南
通过数据，可以发现许多深层的问题，从而优化产品决策。那么，怎么才能做好一次好的数据分析工作呢？本文详细阐述了数据分析的前置工作，将由两个方面诠释作者对数据分析准备工作的理解。

2023-03-23 15:09:22

数据分析数据收集
大数据产业狂飙突进，柏睿数据剑指数据智能赛道独角兽 原创
柏睿数据发布全新数据智能产品矩阵

2023-03-22 14:56:47

大数据柏睿数据数字化转型
个性化与智慧城市的未来
个性化技术是创建成功的未来智慧城市的重要组成部分。通过利用技术，城市可以变得更高效、更互联和更可持续。

2023-03-21 12:46:30

智慧城市人工智能大数据
大数据安全利器 Ranger 编译安装
Ranger大数据领域的一个集中式安全管理框架，它可以对诸如Hdfs、Hive、Kafka、Storm等组件进行细粒度的权限控制。本文将介绍部署过程。

2023-03-21 07:47:04

Ranger安全管理框大数据
腾讯2022年度研发大数据报告：研发人员占比74%
从腾讯官方获悉，今日腾讯发布《2022 年腾讯研发大数据报告》，这份由腾讯技术委员会出品的报告，披露了 2022 年腾讯在研发投入、研发效能、开源协同等方面的重要数据。

2023-03-20 16:28:49

大数据云计算腾讯
柏睿数据2023新品发布会在京成功举办，升级全新数据智能算力基座
夯实数字核心基座、助力千行百业加速迈向数智时代

2023-03-17 10:03:05

数字化大数据
处理缺失值的三个层级的方法总结
缺失值是现实数据集中的常见问题，处理缺失值是数据预处理的关键步骤。缺失值可能由于各种原因而发生，例如数据的结构和质量、数据输入错误、传输过程中的数据丢失或不完整的数据收集。

2023-03-16 15:13:41

缺失值据集中数据分析
新一代云数据平台架构演进之路
下面我们将从不同发展阶段来介绍大数据平台的演化和大数据基础设施的演进过程。

2023-03-16 07:20:15

大数据平台云数据
数据治理实践 | 网易某业务线的计算资源治理
对于调度优化一开始会无从下手，统计凌晨2-5点区间下大概600+任务难梳理，同时存在任务依赖，修改起来可能会对下游整体有大的影响，因此我们选择循序渐进先梳理再改善。

2023-03-15 18:34:26

资源治理数据治理业务线
Apache Kyuubi 1.6.0 新特性解读
文将对 Apache Kyuubi 1.6.0 版本特性进行解读。

2023-03-15 07:29:54

开源数据湖
如何构建好的用户画像平台？
画像平台是一个在中台侧应用非常广，在业务侧依赖很重的产品。本文将分享快看在建设画像平台方面的一些经验。

2023-03-15 07:22:56

画像平台数据中台
火山引擎 DataLeap：揭秘字节跳动业务背后的分布式数据治理思路
经过十多年的发展， 数据治理在传统行业以及新兴互联网公司都已经产生落地实践。字节跳动也在探索一种分布式的数据治理方式。本篇内容来源于 火山引擎 超话数据直播活动的回顾，将从以下四个部分展开分享：字节的挑战与实践，数据治理的发展与分布式，分布式自治架构，分布式自治核心能力。

2023-03-13 21:55:37

数据治理
确保企业数据完整性的五种方法
通过采取必要的步骤来确保数据的完整性，企业可以提高数据的准确性并实现利润最大化。有了干净可靠的数据，企业可以做出更好的决策，识别新的增长机会，降低成本，并防止代价高昂的错误。

2023-03-13 14:23:56

企业数据大数据
这一次，我用数据分析提升了用户转化率
某在线教育机构，每周会开免费的直播，所有用户预约后可以观看直播。业务方期望通过直播能提升用户的付费率。

2023-03-10 11:33:40

用户转化率数据分析
AI 算法在大数据治理中的应用
普遍观念认为，云计算收集存储海量数据，从而形成大数据；再经过对大数据的挖掘学习，进一步形成 AI 模型。这种观念默认了大数据服务于 AI，但忽视了其实 AI 算法也可以反哺于大数据，它们之间是一个双向、互相支撑、依赖的关系。

2023-03-10 07:30:24

AI大数据
如何组织、保护和有效应用大数据与自动化
虽然大数据和自动化带来了巨大的好处，但对于制造商来说，在推出新技术时优先考虑网络安全至关重要。如果没有适当的网络安全措施，制造商可能会暴露敏感数据，并遭受代价高昂的攻击，这可能会破坏他们技术进步的所有好处。

2023-03-10 07:08:09

大数据自动化网络
上一页 1 ··· 1718192021 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服