51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术25年5月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9088内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9088 条
预测分析的四个成功案例
预测分析工具会将统计建模、预测和机器学习等技术应用于描述性和诊断性的分析输出结果，以对未来的结果进行预测。

2021-07-12 10:38:51

预测分析数据分析大数据
ZooKeeper 分布式锁 Curator 源码之三：可重入锁并发加锁
在了解了加锁和锁重入之后，最需要了解的还是在分布式场景下或者多线程并发加锁是如何处理的?

2021-07-10 10:02:30

ZooKeeperCurator并发
我用Excel发现了数据分析的本质：回归分析
其实绝大多数的数据分析问题，都可以归纳为一个问题：相关性问题。相关性分析是数据统计学中的基础思想，主要就是为了探究数据之间是否具有关联性，简单说就是X与Y或者X与Y、Z等之间的变化是否有关联。

2021-07-10 07:40:27

Excel数据分析大数据
农业大数据能带来什么，对农村发展有什么作用？
农业大数据的发展应用是建设农业农村现代化、实施乡村振兴战略、推进农业农村信息化发展和推动我国从农业大国走向农业强国的有力抓手。那农业大数据能带来什么，对农村发展有什么作用？接下来就和小编了解了解吧。

2021-07-09 20:12:48

大数据农业
业财一体趋势下，FONE如何做业财融合的“超级大脑”？
为了使财务系统更具效能，不少企业开始推行预算管理的“自我进化”。有专家认为，传统预算管理的确存在一些弊端，但预算管理作为现代企业管理的奠基石，其对企业管理的重要性是毋庸置疑的。对此，“全面预算”作为能把组织所有关键职能融会贯通的财务管理方法之一，被推到了前台。

2021-07-09 15:42:42

财务大数据
Spark Streaming精进之前必须了解的基本概念
Spark是一个快速的，多用途的计算系统。这是来自官网的自我介绍。一般敢自称系统的都是有两把刷子的，况且还是多用途的计算系统。Spark计算系统包含如下功能组件。

2021-07-09 10:27:12

SparkStreaming系统
ZooKeeper 分布式锁 Curator 源码之二：可重入锁重复加锁和锁释放
当锁需要释放的时候，只需要调用 lock.release() 进行释放即可，具体是如何释放的呢？

2021-07-09 06:48:31

ZooKeeperCurator源码
IDC：预计到2025年中国商业智能软件市场规模将达13.3亿美元
2020年中国商业智能软件市场规模为5.8亿美元，同比增长17.1%。预计到2025年，中国商业智能软件市场规模将达到13.3亿美元，未来5年整体市场年复合增长率为17.9%。

2021-07-08 15:44:38

智能软件大数据IDC
大数据、5G 和手术机器人正在改变医疗保健
技术进步带来的每个部门工作效率的巨大提高也使医疗保健部门受益。人工智能、机器学习、大数据服务和机器人帮助手术的引入已被证明提高了卫生部门人员的工作能力。

2021-07-08 10:07:18

5G大数据机器人
大数据“杀熟”最高可罚五千万元
App“不全面授权就不让用”、大数据“杀熟”、个人信息收集任性等问题长时间困扰互联网用户。对于以上问题，《条例》明确进行了限制，对于违反相关条例的内容将给予重罚。

2021-07-08 09:44:22

大数据信息收集App
ZooKeeper 分布式锁 Curator 源码 之一：可重入锁
一般工作中常用的分布式锁，就是基于 Redis 和 ZooKeeper，前面已经介绍完了 Redisson 锁相关的源码，下面一起看看基于 ZooKeeper 的锁。也就是 Curator 这个框架。

2021-07-08 09:21:17

ZooKeeper分布式锁 Curator
用智慧监管有效反制大数据“杀熟”
根据《价格违法行为行政处罚规定(修订征求意见稿)》，对“杀熟”者除了处以上一年度销售总额1‰以上5‰以下罚款外，对情节严重者还可责令停业整顿，或者吊销营业执照。

2021-07-08 08:38:09

大数据大数据“杀熟”数据监管
《深圳经济特区数据条例》发布，从四方面探索大数据发展
7月6日，深圳公布《深圳经济特区数据条例》，并计划于明年1月1日起实施。作为国内数据领域首部基础性、综合性立法，《条例》对我国探索发展数字经济带来重要作用。

2021-07-07 17:50:08

大数据发展大数据数据
「详谈 Delta Lake」系列技术专题 之 湖仓一体（Lakehouse）
本文翻译自大数据技术公司 Databricks 针对数据湖 Delta Lake 系列技术文章。众所周知，Databricks 主导着开源大数据社区 Apache Spark、Delta Lake 以及 ML Flow 等众多热门技术，而 Delta Lake 作为数据湖核心存储引擎方案给企业带来诸多的优势。

2021-07-07 10:13:56

大数据Delta Lake 湖仓一体
大数据：不容忽视的十大趋势
经过数年发展，我国的大数据产业日渐成熟，很多创新技术从概念走向落地。那么，我国大数据产业发展呈现哪些重要趋势？

2021-07-07 09:45:20

大数据数据安全数据技术
2021年风险市场技术奖揭晓，Cloudera荣膺“年度数据管理产品”
日前，Cloudera在2021年风险市场技术奖(Risk Markets Technology Awards 2021)评选中荣获“年度数据管理产品奖”，这意味着Cloudera 旗下的数据管理平台(Cloudera Data Platform)赢得了对风险控制要求极为严格的金融市场的认可。

2021-07-06 13:31:25

Cloudera数据管理数据分析
面试官：如何管控数据？
数据管控是在做大数据平台包括传统BI都需要做的工作，数据从各个数据源过来，我们都要进行数据质量的管理，也就是我们常说的数据治理。那么在数据仓库建设的时候如何进行数据管控呢？

2021-07-06 07:08:18

管控数据数仓
数据仓库有坑怎么办，如何从0到1来填坑
这种数据仓库体系，最典型的特征，是找数据只能给表，无法通过规范自主查找;看逻辑只能问人，无法通过模型设计快速了解;问业务只能靠求，别人管不过来自己的事情了，哪有时间来管你?

2021-07-05 22:32:33

数据仓库团队
“学思知行 走进榜样”之走进紫光集团完美收官
7月3日，由CIO百人会指导、CIO时代主办、新基建创新研究院作为智库支持的“学思知行 走进榜样”之走进紫光集团的游学活动，在北京紫光集团成功举办。

2021-07-05 15:22:07

紫光CIO
可以优化成本和性能的六种云计算数据管理技术
强大的云计算数据管理功能可以为企业带来更多优势。它在数据访问方面提供了更大的灵活性，让企业可以更快地扩展数据库，从长远来看，甚至可以降低数据管理的总拥有成本。

2021-07-05 11:07:41

云计算数据管理云应用
一文读懂大数据实时计算
现在大数据应用比较火爆的领域，比如推荐系统在实践之初受技术所限，可能要一分钟，一小时，甚至更久对用户进行推荐，这远远不能满足需要，我们需要更快的完成对数据的处理，而不是进行离线的批处理。

2021-07-05 10:48:42

大数据实时计算
时评：给大数据“杀熟”戴上重罚紧箍咒
大数据“杀熟”是利用大数据平台进行不正当竞争的市场行为，须依法惩戒规范。“看得见的政府之手”不能放任自流而须有所作为。政府思维要更新，立法进程要跟进，市场监管也与时俱进。

2021-07-05 09:52:05

大数据大数据“杀熟”数据监管
国家出手了！“大数据杀熟”将被严惩，深圳已出新规，2022年执行
现在大数据技术已经深入我们生活的方方面面，给我们带来了非常多的便利，比如在购物方便，大数据可以根据我们的喜好，精准地给我们推荐想要的商品。但大数据杀熟的事情经常被曝光。

2021-07-04 19:59:20

大数据大数据杀熟大数据技术
Tableau最新更新：旨在加强 AI 增强分析，和更广泛地访问数据 译文
Tableau 2021.2中增强的分析功能包括对个性化体验的Ask Data特性的改进，使用新的用户界面和自然语言搜索工具的Explain Data，以及与Salesforce的报告集成。Salesforce表示，他们正在越来越多地销售 Tableau 及其核心云。

2021-07-02 17:40:03

Tableau数据人工智能
可视化神器Plotly玩转漏斗图
从搜索人数开始到支付成功，每个阶段用户都存在一定的流失，漏斗图就能很好地将这种流失和转化情况显示出来。除去柱状图、饼图、折线图，漏斗图应该是自己在工作画的最为频繁的一种图表。下面我们通过模拟某个电商网站的用户行为来绘制漏斗图。

2021-07-02 14:07:00

可视化Plotly漏斗图
人工智能和大数据是什么？它们之间存在着怎样的关系呢？
在行业内，人工智能与大数据密不可分，可以将很多大数据的应用归结为人工智能，随着人工智能的快速应用及普及，大数据不断累积，深度学习及强化学习等算法不断优化，大数据技术将与人工智能技术更紧密地结合，具备对数据的理解、分析、发现和决策能力，从而能从数据中获取更准确、更深层次的知识......

2021-07-02 13:24:15

人工智能AI大数据
终于有人把用户画像的流程、方法讲明白了
现代交互设计之父Alan Cooper很早就提出了Persona的概念：Persona是真实用户的虚拟代表，是建立在一系列真实数据之上的目标用户模型，用于产品需求挖掘与交互设计。

2021-07-01 21:48:09

用户画像流程
全球大数据软件规模达4813.6亿元，微软/Oracle/SAP位列Top3
6月份IDC发布《中国大数据平台市场研究报告-2020》，报告显示，2020年全球大数据软件市场规模达4813.6亿元人民币，微软、Oracle、SAP位列Top3，占据30%以上的市场份额。

2021-07-01 14:22:18

大数据大数据平台软件市场
数据安全法之下，数据确权有法可依吗？
近日，《中华人民共和国数据安全法》(以下简称“数据安全法”)的出台，引发了国内各界的高度关注。作为我国第一部有关数据安全的专门法律，也是国家安全领域的一部重要法律，将于2021年9月1日起施行。

2021-07-01 13:40:44

数据安全法数据确权法律
1亿行为数据，知乎、清华开放国内最大个性化推荐实际交互数据集
知乎联合清华大学对外开放基于知乎的大规模富文本查询和推荐数据集「ZhihuRec」。该数据集包含了知乎上的 1 亿个行为数据，是目前为止，国内用于个性化推荐的最大的实际交互数据集。

2021-07-01 09:53:38

数据知乎清华
数字化转型的第一步，究竟难在哪里？
回望过去几年，物联网、大数据、人工智能、工业互联网等技术迅猛发展，成为推动制造业转型升级的新动能。而新冠疫情更是暴露出制造业在资金、生产、供应链等多方面的问题，加速了不少企业进行数字化转型的决心。然而，数字化转型是什么呢？

2021-07-01 08:31:25

数字化转型大数据数据采集
如何在大数据的风口上，实现其价值最大化，并带动产业持续发展
随着数字化进程的不断推进，大数据在不同领域慢慢展现出至关重要的价值影响力。此外，大数据至少还有20年数字经济服务项目行业快速提高的阶段，每一个领域都是会备受大数据发展所产生的褔利。

2021-06-30 20:24:40

大数据大数据应用
钱都去哪了？大数据解读年轻人的消费观
据统计，今年的活动热度与往年相比依旧热闹。今年618期间，全网交易总额在5784.8亿元左右，同比增长了26.5%。这与大家预测的“疫情影响消费”的结论相差较大。经过分析，本次消费的主要贡献力量还是在恢复能力较强的年轻人身上。

2021-06-30 14:24:31

大数据年轻人消费观
大数据分析如何影响供应链?
大数据作为一种用户友好的重要资产，并改变了供应链。但大数据给行业带来的最有价值的东西是什么?其答案是创造大量知识以供分享的能力。

2021-06-30 13:46:24

大数据分析数据分析大数据
一文了解基于Flink1.12构建流批一体数仓的技术点
基于Flink构建流批一体的实时数仓是目前数据仓库领域比较火的实践方案。

2021-06-30 09:20:08

数仓FlinkHive
详解大数据框架之分区，分桶，分片
在大数据分布式中，分区，分桶，分片是设计框架的重点。此篇就来总结各个框架。

2021-06-29 20:51:16

大数据框架分桶
从1到N的创新 企业数据价值深度挖掘需找对适合平台 原创
越来越多的企业开始重点关注数据对企业商业创新和业务价值变现能力。这个创新如果从0到1，付出的成本会相对较高，但是企业可以利用标准化的技术工具，结合成熟的方法论体系，配合相应的组织架构，实现从1到N的创新。

2021-06-29 17:20:16

数据中台用友iuap
数据科学项目失败的八个原因
事实上，利用科学方法、流程、算法和技术系统从结构化和非结构化数据中获取各种见解的数据科学项目可能会以多种方式失败，从而导致时间、金钱和其他资源的浪费。

2021-06-29 10:03:45

数据科学机器学习算法
大数据对企业管理数据决策的影响
所谓大数据是指具有一定功能的庞大数据集。从"巨人"的量词中，我们可以清楚地认识到，大数据的数据集在数量和规模上都是相当大的，这远远超出了人们的理解。大数据的采集、存储、管理和分析都需要使用专业的软件工具和硬件设备，否则普通的设备工具就不能满足大数据分析的功能要求。

2021-06-29 09:50:35

大数据大数据技术
SQL数据分析系列之视图
设计良好的应用程序通常会在保持实现细节私有性的同时公开一个公共接口，从而在不影响终端用户的情况下支持将来的设计变动。在设计数据库时，通过保持表的私有性并允许用户仅通过一组视图访问数据，你可以获得类似的结果。

2021-06-29 07:04:39

SQL数据视图
数据分析能力分级模型，你在哪一级？
很多做数据的新人都有这个困惑，今天陈老师给大家解这个局。这里问题的核心在于：如果不能按自己的建议做项目，是不是就不能提升数据分析能力了?回答当然是：否!数据分析的能力晋级分为四个层级，所谓“按我的意见做”根本就不在这个晋级体系里。

2021-06-28 17:30:53

数据分级模型
从人工智能到团队合作：数据科学家的七项关键技能
美国劳工统计局将数据科学家列为未来增长最快的15个职业之一，随着数据日益成为所有企业的命脉，数据科学家不仅需要具备过硬的知识和技能，还需要具备强大的商业头脑。

2021-06-28 14:13:26

人工智能数据科学家数据
如何避免被大数据“杀熟” 专家：改变信息失衡
杜绝大数据杀熟，要从严格执法方面入手。有关部门应依据相关法律法规严格执法。电子商务经营者要严格遵守电子商务法，应当真实、准确、及时地披露商品或者服务信息，保障消费者的知情权和选择权。

2021-06-28 13:34:06

大数据大数据监管数据安全
Flink 和 Iceberg 如何解决数据入湖面临的挑战
数据实时入湖可以分成三个部分，分别是数据源、数据管道和数据湖（数仓），本文的内容将围绕这三部分展开。

2021-06-28 09:34:55

数据湖大数据Flink
年中盘点：2021年炙手可热的10家数据科学和机器学习初创公司
当今企业正在利用不断增长的数据获得竞争优势，也就是采用数据科学、人工智能、机器学习、甚至是深度学习领域的新兴技术来准备和组织大数据。

2021-06-27 17:24:01

数据科学机器学习初创公司
保险业数字化转型的人才困境
团体保险不是一个具体的险种，而是一种承保方式。它以团体为保险对象，以集体名义投保并由保险人签发一份总的保险合同，保险人按合同规定向其团体中的成员提供保障的保险。团体保险一般有团体人寿保险，团体年金保险，团体意外伤害保险和团体健康保险等种类。

2021-06-25 09:58:38

数字化健康医疗
数据爬取亟需规范 平台又该承担何责？
近年来，数据泄露案件频发。有专家指出，尽管企业在其中也是受害者之一，但是从个人信息保护的角度，只要用户因信息泄露遭受损失，平台需肩负一定责任。

2021-06-24 09:41:43

数据爬取爬虫平台
技术创新普惠千行百业 华为云助力企业解锁数据价值 原创
数据无疑已经成为数字经济时代的核心生产要素，数据有效应用正在推动经济社会发展，推进各行各业数字化转型进程。华为云坚持以技术创新普惠千行百业，助力企业实现全面云化、全栈智能，赋能行业数字化转型。

2021-06-23 17:47:12

华为云大数据湖仓一体
如何实施有效的智能主数据管理策略
虽然对不同来源的数据进行收集和管理现在是很多企业的标准做法，但数据很可能会被分散、孤立甚至没有进行清理。任何不准确的数据都会阻碍企业跨渠道的决策能力，将对业务增长和客户满意度带来不利影响。特别是在当前情况下，许多企业不得不面对数据管理流程带来的损失。

2021-06-22 14:10:16

主数据管理数据治理
大数据开发技术之Hadoop组成三大架构
Hadoop在我们大数据培训课程中占据着举足轻重的地位，被公认为是一套行业大数据标准开源软件，在分布式环境下提供了海量数据的处理能力。在所有的大数据培训机构都把它作为必备课，它不仅是在大数据培训行业而且几乎所有主流厂商都围绕Hadoop开发工具、开源软件、商业化工具和技术服务。

2021-06-21 17:04:55

大数据Hadoop
上一页 1 ··· 4142434445 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服