51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术24年11月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9063内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9063 条
人工智能和大数据是什么？它们之间存在着怎样的关系呢？
在行业内，人工智能与大数据密不可分，可以将很多大数据的应用归结为人工智能，随着人工智能的快速应用及普及，大数据不断累积，深度学习及强化学习等算法不断优化，大数据技术将与人工智能技术更紧密地结合，具备对数据的理解、分析、发现和决策能力，从而能从数据中获取更准确、更深层次的知识......

2021-07-02 13:24:15

人工智能AI大数据
终于有人把用户画像的流程、方法讲明白了
现代交互设计之父Alan Cooper很早就提出了Persona的概念：Persona是真实用户的虚拟代表，是建立在一系列真实数据之上的目标用户模型，用于产品需求挖掘与交互设计。

2021-07-01 21:48:09

用户画像流程
全球大数据软件规模达4813.6亿元，微软/Oracle/SAP位列Top3
6月份IDC发布《中国大数据平台市场研究报告-2020》，报告显示，2020年全球大数据软件市场规模达4813.6亿元人民币，微软、Oracle、SAP位列Top3，占据30%以上的市场份额。

2021-07-01 14:22:18

大数据大数据平台软件市场
数据安全法之下，数据确权有法可依吗？
近日，《中华人民共和国数据安全法》(以下简称“数据安全法”)的出台，引发了国内各界的高度关注。作为我国第一部有关数据安全的专门法律，也是国家安全领域的一部重要法律，将于2021年9月1日起施行。

2021-07-01 13:40:44

数据安全法数据确权法律
1亿行为数据，知乎、清华开放国内最大个性化推荐实际交互数据集
知乎联合清华大学对外开放基于知乎的大规模富文本查询和推荐数据集「ZhihuRec」。该数据集包含了知乎上的 1 亿个行为数据，是目前为止，国内用于个性化推荐的最大的实际交互数据集。

2021-07-01 09:53:38

数据知乎清华
数字化转型的第一步，究竟难在哪里？
回望过去几年，物联网、大数据、人工智能、工业互联网等技术迅猛发展，成为推动制造业转型升级的新动能。而新冠疫情更是暴露出制造业在资金、生产、供应链等多方面的问题，加速了不少企业进行数字化转型的决心。然而，数字化转型是什么呢？

2021-07-01 08:31:25

数字化转型大数据数据采集
如何在大数据的风口上，实现其价值最大化，并带动产业持续发展
随着数字化进程的不断推进，大数据在不同领域慢慢展现出至关重要的价值影响力。此外，大数据至少还有20年数字经济服务项目行业快速提高的阶段，每一个领域都是会备受大数据发展所产生的褔利。

2021-06-30 20:24:40

大数据大数据应用
钱都去哪了？大数据解读年轻人的消费观
据统计，今年的活动热度与往年相比依旧热闹。今年618期间，全网交易总额在5784.8亿元左右，同比增长了26.5%。这与大家预测的“疫情影响消费”的结论相差较大。经过分析，本次消费的主要贡献力量还是在恢复能力较强的年轻人身上。

2021-06-30 14:24:31

大数据年轻人消费观
大数据分析如何影响供应链?
大数据作为一种用户友好的重要资产，并改变了供应链。但大数据给行业带来的最有价值的东西是什么?其答案是创造大量知识以供分享的能力。

2021-06-30 13:46:24

大数据分析数据分析大数据
一文了解基于Flink1.12构建流批一体数仓的技术点
基于Flink构建流批一体的实时数仓是目前数据仓库领域比较火的实践方案。

2021-06-30 09:20:08

数仓FlinkHive
详解大数据框架之分区，分桶，分片
在大数据分布式中，分区，分桶，分片是设计框架的重点。此篇就来总结各个框架。

2021-06-29 20:51:16

大数据框架分桶
从1到N的创新 企业数据价值深度挖掘需找对适合平台 原创
越来越多的企业开始重点关注数据对企业商业创新和业务价值变现能力。这个创新如果从0到1，付出的成本会相对较高，但是企业可以利用标准化的技术工具，结合成熟的方法论体系，配合相应的组织架构，实现从1到N的创新。

2021-06-29 17:20:16

数据中台用友iuap
数据科学项目失败的八个原因
事实上，利用科学方法、流程、算法和技术系统从结构化和非结构化数据中获取各种见解的数据科学项目可能会以多种方式失败，从而导致时间、金钱和其他资源的浪费。

2021-06-29 10:03:45

数据科学机器学习算法
大数据对企业管理数据决策的影响
所谓大数据是指具有一定功能的庞大数据集。从"巨人"的量词中，我们可以清楚地认识到，大数据的数据集在数量和规模上都是相当大的，这远远超出了人们的理解。大数据的采集、存储、管理和分析都需要使用专业的软件工具和硬件设备，否则普通的设备工具就不能满足大数据分析的功能要求。

2021-06-29 09:50:35

大数据大数据技术
SQL数据分析系列之视图
设计良好的应用程序通常会在保持实现细节私有性的同时公开一个公共接口，从而在不影响终端用户的情况下支持将来的设计变动。在设计数据库时，通过保持表的私有性并允许用户仅通过一组视图访问数据，你可以获得类似的结果。

2021-06-29 07:04:39

SQL数据视图
数据分析能力分级模型，你在哪一级？
很多做数据的新人都有这个困惑，今天陈老师给大家解这个局。这里问题的核心在于：如果不能按自己的建议做项目，是不是就不能提升数据分析能力了?回答当然是：否!数据分析的能力晋级分为四个层级，所谓“按我的意见做”根本就不在这个晋级体系里。

2021-06-28 17:30:53

数据分级模型
从人工智能到团队合作：数据科学家的七项关键技能
美国劳工统计局将数据科学家列为未来增长最快的15个职业之一，随着数据日益成为所有企业的命脉，数据科学家不仅需要具备过硬的知识和技能，还需要具备强大的商业头脑。

2021-06-28 14:13:26

人工智能数据科学家数据
如何避免被大数据“杀熟” 专家：改变信息失衡
杜绝大数据杀熟，要从严格执法方面入手。有关部门应依据相关法律法规严格执法。电子商务经营者要严格遵守电子商务法，应当真实、准确、及时地披露商品或者服务信息，保障消费者的知情权和选择权。

2021-06-28 13:34:06

大数据大数据监管数据安全
Flink 和 Iceberg 如何解决数据入湖面临的挑战
数据实时入湖可以分成三个部分，分别是数据源、数据管道和数据湖（数仓），本文的内容将围绕这三部分展开。

2021-06-28 09:34:55

数据湖大数据Flink
年中盘点：2021年炙手可热的10家数据科学和机器学习初创公司
当今企业正在利用不断增长的数据获得竞争优势，也就是采用数据科学、人工智能、机器学习、甚至是深度学习领域的新兴技术来准备和组织大数据。

2021-06-27 17:24:01

数据科学机器学习初创公司
保险业数字化转型的人才困境
团体保险不是一个具体的险种，而是一种承保方式。它以团体为保险对象，以集体名义投保并由保险人签发一份总的保险合同，保险人按合同规定向其团体中的成员提供保障的保险。团体保险一般有团体人寿保险，团体年金保险，团体意外伤害保险和团体健康保险等种类。

2021-06-25 09:58:38

数字化健康医疗
数据爬取亟需规范 平台又该承担何责？
近年来，数据泄露案件频发。有专家指出，尽管企业在其中也是受害者之一，但是从个人信息保护的角度，只要用户因信息泄露遭受损失，平台需肩负一定责任。

2021-06-24 09:41:43

数据爬取爬虫平台
技术创新普惠千行百业 华为云助力企业解锁数据价值 原创
数据无疑已经成为数字经济时代的核心生产要素，数据有效应用正在推动经济社会发展，推进各行各业数字化转型进程。华为云坚持以技术创新普惠千行百业，助力企业实现全面云化、全栈智能，赋能行业数字化转型。

2021-06-23 17:47:12

华为云大数据湖仓一体
如何实施有效的智能主数据管理策略
虽然对不同来源的数据进行收集和管理现在是很多企业的标准做法，但数据很可能会被分散、孤立甚至没有进行清理。任何不准确的数据都会阻碍企业跨渠道的决策能力，将对业务增长和客户满意度带来不利影响。特别是在当前情况下，许多企业不得不面对数据管理流程带来的损失。

2021-06-22 14:10:16

主数据管理数据治理
大数据开发技术之Hadoop组成三大架构
Hadoop在我们大数据培训课程中占据着举足轻重的地位，被公认为是一套行业大数据标准开源软件，在分布式环境下提供了海量数据的处理能力。在所有的大数据培训机构都把它作为必备课，它不仅是在大数据培训行业而且几乎所有主流厂商都围绕Hadoop开发工具、开源软件、商业化工具和技术服务。

2021-06-21 17:04:55

大数据Hadoop
将让业务繁荣发展的十大数据分析趋势
通过使用先进的分析和技术，企业可以轻松预测客户需求、个性化内容、提高收入并实现目标。企业正在采用分析和系统统计推理来做出提高效率、风险管理和利润的决策，同时保持库存、定价解决方案以及招聘人才。

2021-06-21 14:04:18

大数据人工智能大数据分析
企业级数据中台的终局剖析
数据中台一定不仅是一个单体的软件能够形成的，它是一个体系化的企业级数据加工厂，所以数据中台的建设也是需要顶层规划，分步建设的。

2021-06-21 11:57:04

数据中台数字化转型数字化
快手阿里美团数据工程师齐聚 分享数据架构实践
近日，快手数据平台部联动快手中学在快手总部举办快手大数据架构技术交流会，交流会邀请了来自快手、阿里巴巴、美团的5位技术大咖，为现场和线上听众带来了一场技术分享盛宴。

2021-06-21 11:22:29

数据架构实践
为什么数据和分析对农场至关重要
从1837年引进钢犁到采用GPS、物联网和人工智能等先进技术，农民们一直在研究技术和创新如何提高他们的工作效率。这一点极其重要，因为他们肩负着一项艰巨的任务：为全球77亿人创造食物、燃料和纤维。

2021-06-21 09:00:34

大数据物联网
什么是数据驱动设计？收下这篇入门科普！
在这篇文章中，我们将深入探讨什么是数据驱动设计，以及为什么它能更好地推动用户体验的提升 。与此同时，我们还将了解为什么它能帮助我们做出更实际的决策。

2021-06-18 12:39:12

数据驱动设计设计师收集数据
五分钟技术趣谈 | 数据分析中的客户端埋点
在传统的Web APP和 Native APP开发的产品中，埋点从技术的角度来说未必多深奥，但从业务的角度来说要做到设计规范、流程高效和保证质量却很难。每个业务版本中都可能会有数据埋点工作，那工作中的数据埋点是怎么运转的呢?

2021-06-17 13:35:23

数据埋点分析客户端
数据分析成企业“杀手锏”，提升分析力就看这5招
优秀的工具、出色的数据管理和良好的策略是数据分析取得成功的关键。以下这些最佳实践可以帮助企业将不断增长的数据转化为更好的业务决策。

2021-06-17 13:10:47

数据分析自助式分析数据
获客分析的三大痛点，如何解决？
之所以要做获客分析，关键点还是在于涉及钱，涉及到预算，这往往是我们要首要分析的一个事情 ，所以我们需要对流量有一个清晰的认知，从数量、质量以及到后续的转化都能了如指掌，花同样的钱能够获得更好的效果。

2021-06-17 10:19:48

获客分析数据流量
Google BigQuery是大数据分析的未来吗?
Google BigQuery是一项运行在谷歌云平台中的用于收集和分析大数据(也称为数据仓库)的服务。它于2011年推出，因其采用无服务器架构而备受赞誉，该架构支持高度可扩展和快速提供的结构化查询语言(SQL)分析。

2021-06-15 14:07:42

Google BigQ大数据大数据分析
五种Pandas图表美化样式汇总
我们在做excel表格的时候，常常会对重要数据进行highlight，或者用不同颜色表示数据的大小。这在Pandas中也是可以实现的，而且非常简洁。

2021-06-15 09:25:39

数据工具图表
在Spark中，什么叫内存计算?
由于计算的融合只发生在 Stages 内部，而 Shuffle 是切割 Stages 的边界，因此一旦发生 Shuffle，内存计算的代码融合就会中断。

2021-06-15 07:04:59

内存SparkStages
20款优秀的数据可视化工具 (建议收藏)
下面列举的二十个数据可视化工具，无论你是准备制作简单的图表还是复杂的图谱或者信息图，这些工具都能满足你的需要。更加美妙的是，这些工具大多免费。

2021-06-11 17:45:57

大数据可视化工具
汽车之家：基于 Flink + Iceberg 的湖仓一体架构实践
湖仓一体的意义就是说我不需要看见湖和仓，数据有着打通的元数据的格式，它可以自由的流动，也可以对接上层多样化的计算生态。

2021-06-11 14:01:51

数据仓库湖仓一体 Flink
数据的“敏捷制造”，DataWorks一站式数据开发治理范式演进
企业大数据技术发展至今，历经了两次蜕变。第一次蜕变从最初的“小作坊”解决大数据问题，到后来企业用各类大数据技术搭建起属于自己的“大平台”，通过平台化的能力完成数据生产力的升级。

2021-06-11 13:56:27

大数据DataWorks数据开发
能源的未来建立在数据之上
大约70%的电力变压器25年以上，60%的断路器30年以上，70%的配电线路25年以上。这种现象在全球许多国家都一样。

2021-06-11 10:27:33

能源物联网数据之
数仓 | 该如何理解数据仓库的建设
在大数据时代，随着机器学习和人工智能的兴起，这个定义需要做一些补充：数据仓库不只是用于构建支持管理决策的商业智能BI的基础, 也是大量的机器学习和人工智能算法的底层基础之一。

2021-06-11 07:26:16

数据仓库机器学习
大数据现状与趋势：大数据应用、治理与技术
全球范围内，研究发展大数据技术、运用大数据推动经济发展、完善社会治理、提升政府服务和监管能力正成为趋势。下面将从应用、治理和技术三个方面来讲讲当前的大数据的现状与趋势。

2021-06-10 19:10:32

大数据大数据应用大数据技术
剖析数据平台：新一代数据湖 译文
架构的重要之处不在于供应商或特定产品，而在于所用组件的功能。产品的选择取决于许多的因素。

2021-06-10 14:01:38

大数据数据平台数据湖
轻松三步搞定数据统计分析：统计+分析+可视化！
我们都知道，数据是支撑决策的重要依据，于是我们可以看到，几乎所有的产品，都会具有数据统计分析的功能模块。往大了说，比如数据中台;往高端了说，比如数据大屏、数据看板、数据驾驶舱;往本质了说，其实就是数据的统计分析。作为一个非数据型产品经理，或者是初级产品经理，该怎样设计这个功能模块呢?

2021-06-10 09:53:04

数据统计统计分析数据
详解新一代数据湖--数据平台 译文
本文系统性地向您介绍了数据平台的模型、获取模式、获取引擎服务、数据湖即服务、以及数据湖的功用与进化。

2021-06-10 09:00:00

数据湖架构数据平台
手把手教你使用Python打造绚丽的词云图
相信大家对这个概念比较陌生，它其实就是指的是对某一段文本中出现频率最高的关键词进行特殊描绘，过滤到太多没用的字眼，以此达到视觉上的突出，让人一看就知道这篇文章讲的什么。

2021-06-10 07:49:28

Python词云图wordcloud
Hadoop 数据迁移用法详解
需要将数据源集群的/etc/hosts中的hadoop节点拷贝到目标集群所有节点的/etc/hosts中，保证新集群所有节点可以ping同老集群所有节点;

2021-06-09 17:51:12

Hadoop数据迁移
大数据为企业带来的6个好处
当企业高管听到“大数据”这个术语时，他们自然而然地想到的是数量惊人的可用数据。这些数据来自电子商务和全渠道营销领域，或来自物联网上的连接设备，或来自生成有关交易活动的更详细信息的应用程序。

2021-06-09 14:37:10

大数据互联网大数据应用
易企信多功能协同 推动拓客、商调业务体验升级
如何全面、深入的了解企业以及企业群，对于以ToB型业务为主的公司、金融类行业机构以及某些政府部门来说都是重中之重。

2021-06-09 11:43:19

易企信数据AI
我为什么不建议你抄大厂的用户画像？
看到用户画像的标题，熟悉陈老师的同学就知道：我又要写标签建设的文章了。是滴，再厉害的用户画像也是一个个标签组成的，而标签建设恰好是当前非互联网大厂进行用户画像建设的最大瓶颈。

2021-06-09 11:28:04

用户画像标签
上一页 1 ··· 4142434445 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服