51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术25年5月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9088内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9088 条
成为数据工程师需要具备哪些技能？
成为数据工程师需要具备哪些技能?数据工程工作存在于各个行业，在银行业、医疗保健业、大型科技企业、初创企业和其他行业找到工作机会。许多职位描述要求数据工程师、拥有数学或工程学位，但如果有合适的经验学位往往没那么重要。

2021-03-24 15:15:34

数据工程师开发工具
Tiedemann 发布的数据集让非洲语言也能「机翻」
赫尔辛基大学语言技术教授 Jörg Tiedemann 发布了一个数据集，其中包括超5亿个句子，被翻译成188种语言。

2021-03-24 14:58:42

数据翻译人工智能
如何构建以数据为中心的架构
如今，几乎每个基础设施供应商都将混合云或多云作为一种产品采用。采用多个云服务与采用一个整体云计算解决方案比人们想象的要复杂得多。

2021-03-24 14:13:51

数据分析架构大数据
Java和大数据应该如何选？选对让你薪资翻番
有很多人在听说大数据之后，会开始纠结JAVA与大数据的区别，甚至还在纠结Java和大数据2个方向该选哪个，今天这篇文章就帮大家分析一下，Java和大数据到底选哪个，做哪个方向薪资更高。

2021-03-24 13:27:22

大数据Java薪资
注意这个数据科学错误，避免30多个小时的无用功……
下面这个模型在一项图像识别竞赛中经过了数天训练。这是个相对比较简单的模型，其AUC最初是0.9，符合比赛将AUC控制在0到1之间的要求，除此之外我对比赛也没有太高的期望。

2021-03-24 13:23:31

数据科学大数据泄露机器学习
大数据黑市交易触目惊心：平均每人至少有4条个人信息泄露
你是不是有过这样的疑惑：刚跟朋友聊完理财、美妆、买房、贷款等日常话题，怎么就收到包括抖音、腾讯新闻甚至一些视频网站推送的与聊天内容相关的广告？

2021-03-24 11:38:10

大数据隐私信息安全
大数据存储未来，节能技术开发成为刚需
当前，全球数据量仍在飞速增长的阶段。根据国际机构Statista的统计和预测，2020年全球数据产生量预计达到47ZB，而到2035年，这一数字将达到2142ZB，全球数据量即将迎来更大规模的爆发。

2021-03-24 09:51:08

大数据数据存储节能技术
聊聊关于常用数据类型一二三
数据分析师的工作中最离不开的就是数据，业务中所有的情况都离不开数据这个载体，今天就来看下数据的都有哪些类型以及它们有什么特点。

2021-03-24 09:37:41

数据类型数据分析数据的分类
马云说：“未来是大数据的时代”
“很多人还没搞清楚什么是PC互联网，移动互联网来了，我们还没搞清楚移动互联的时候，大数据时代又来了。”这句话来自于马云的卸任演讲。他曾经还在演讲中说道：未来的时代将不再是IT时代，而是大数据的时代！

2021-03-23 17:31:43

大数据互联网云计算
2021年值得关注的3个数据分析和人工智能趋势
随着组织继续应对冠状病毒疫情，以证明数据分析和人工智能的投资回报率，实现智能自动化以及利用数据的多样性、公平性、包容性至关重要。

2021-03-23 14:32:24

数据分析人工智能AI
深度｜大数据算法应用的测试发展之路
随着最近几年数据计算力与机器智能算法的兴起，基于大数据 AI 算法的应用愈来愈热，大数据应用在各个行业也不断涌现。测试技术作为工程技术的一部分，也随着时代的不断变化在同步演进，在当下 DT 时代，如何测试和保障一个基于大数据的应用的软件质量，成为测试界的一个难题。

2021-03-23 14:11:10

大数据大数据深度算法
从算法之法到法之算法，激荡算法时代
大数据的出现、云计算技术的日渐成熟和深度学习算法的重大突破，推动着算法时代的到来。无论人们在算法的问题上存在什么样的争议，算法正在普遍而广泛地影响人们的生活已经是个越来越明显的事实。

2021-03-23 13:55:35

大数据算法
想成为数据工程师，你需要做哪些准备？
与其他技术角色不同，数据工程没有那么容易，许多人在上大学课程时可能从来没有听说过数据工程师。然而，像Facebook、Amazon、PayPal和Walmart这样的公司却都有数据工程的职位空缺，也有很多初创公司在寻找数据工程师。

2021-03-23 10:04:55

数据工程师工具数据分析
企业数据应用的成熟度评估
人类从石器时代走到信息时代，社会和科技发展的背后，数据的“维”并没有显著增加，“人、物、场景”等足以描述一切，不断变化的是数据的“度”，即如何度量实体对象以及对象之间发生的关系。这也是我们会从“IT时代”走向“DT时代”的原因。

2021-03-22 16:29:02

IT数据分析工具
程序员越来越多，大数据行业工资也越来越高
目前，据不完全统计，我国的程序员俨然已经超过500万了，并且这个数字目前还在不停的上升中。按照以往的道理来讲，一个行业如果从业人数逐渐增多，那么工资应该变得越来越低，但是从招聘启事中我们可以看到，我国程序员的工资还是大幅度的在上涨，这是由于什么原因导致的呢？

2021-03-22 16:02:47

程序员大数据软件
为什么为文本和数据挖掘提供业务案例是拥抱数字技术的关键
人们如今正生活在一个具有无限潜力的时代。技术进步使人工智能和机器学习可以为人类完成一些更具意义的工作，并提高研究团队的能力。

2021-03-22 15:23:53

人工智能机器学习数据挖掘
大型物联网部署需要快速的安装策略
当您需要安装成千上万台物联网设备时，您需要让设备的安装速度非常快。下面的内容讲述了如何做到这一点。

2021-03-19 12:26:00

物联网IoT大数据
阿里的过来人告诉你，数据中台为什么搞不下去了？
搞数据的都知道，阿里发明了数据中台，然后“中台”这个概念就马上成为了国内大多数企业趋之若鹜的风口，真正实施后却发现中台与数据平台、数据湖等项目大差不差，又有好多机构开始忙着拆中台了，中台虽然还没到人见人烦的地步，但总体来讲已经不那么受待见了。

2021-03-19 08:50:11

数据中台业务中台架构
数据分析岗位必须要学习各项编程语言吗？
“数据分析师”这一职业，哪怕你对他的具体职责不够了解，但随着大数据这一行业日渐的与我们现实生活息息相关，你也一定在某篇文章或新闻上有听说过它。

2021-03-18 22:06:01

数据分析编程语言大数据
大数据“杀熟”背后：平台的精准“算计”
最近，大数据 “杀熟”再次成为网民关注焦点，甚至因为这个问题上了热搜，事件起因是一位复旦大学的教授带领自己的团队，经过 800 多次的测试，使用不同价格不同款式的手机发现了一个非常大的问题。

2021-03-18 19:11:42

大数据数据分析
女生从事大数据会有发展前景吗？
最近新闻热点，关于女性的职场、成长、家庭等话题频频被提起，社会对女性的关注变得越来越多，与此同时我们发现女性这个群体开始日益的在各行各业崭露头角，包括那些以为只能男生从事的行业，比如大数据，比如IT等等。

2021-03-18 14:30:18

大数据IT职业
十张图，详解用户分层怎么做
有同学问：领导让做用户分层，可不管怎么分，似乎都觉得没有啥科学道理，也经常被嫌弃：“你这分层分得有啥意思”。到底有没有标准的分层规范?

2021-03-18 12:16:44

用户分层业务
积极培育壮大数据产业
近年来，我国数据要素市场加速扩容，数据要素应用场景衍生拓展，数据要素在增加就业和提高生产效率方面的作用持续发挥，数字产业化、产业数字化积极推进。数据产业积厚成势，将为产业融合发展、改善宏观调控、保障和改善民生、创新社会治理等提供有力支撑。

2021-03-18 10:22:33

大数据数据技术
如何用数据科学改变世界
今天，在数据科学相关领域全球工作近一百万人。该行业已经出现了大规模的增长，在过去两年中有大多数世界上生成的数据。数据驱动的行业在过去几年中看到了大量增长。

2021-03-18 10:21:45

数据科学大数据机器学习
万字详解整个数据仓库建设体系
英文名称为Data Warehouse，可简写为DW或DWH。数据仓库的目的是构建面向分析的集成化数据环境，为企业提供决策支持(Decision Support)。它出于分析性报告和决策支持目的而创建。

2021-03-18 10:04:46

数据仓库体系
Gartner公布2021年十大数据和分析技术趋势
Gartner近日公布了2021年十大数据和分析技术趋势，这些技术趋势将帮助企业组织应对这一年中的各种变化、不确定性和机遇。

2021-03-18 09:07:16

大数据Gartner分析技术
为什么数据与分析对未来农业生产至关重要？
据研究人员预测，到2050年，我们的人口将增长到近100亿，提高农作物产量同时降低传统投入水平的能力比以往任何时候都更为重要。

2021-03-17 10:33:42

农业生产大数据数据分析
图样图森破-pyecharts之地图
pyecharts支持Map（地图）、Geo（地理坐标）、Map3D（三维地图）、BMap（百度地图）多种地图组件。

2021-03-17 08:54:43

Pyecharts可视化工具地图
数据分析师们，每天到底在忙些什么？
这个问题总能见到一些朋友问。新人问，因为数据分析这个事儿听起来挺抽象又很高大上，具体需要做哪些，大家不知道。有些已经在做数据分析的老人也会问，因为自己当前做的工作和入行之前理解的似乎不太一样。

2021-03-16 22:47:42

数据分析大数据岗位
运用大数据，不能“看人下菜碟”！
打车APP是移动互联网时代的产物，相关运营商以APP为平台，以手机为介质，以数据为牵引，高效对接出行乘客与运营车辆，实现了需求与服务的快速匹配、人与车的良好互动，便利了群众出行，提高了司机收入。

2021-03-16 22:39:09

大数据运营商打车
大数据行业人才缺口究竟有多大？
如今我们听到越来越多关于大数据相关的信息，无论是大数据行业的工资薪酬还是大数据的人才缺口数量，它已然成为了是继云计算、物联网后的又一全球热点问题它不断的受到了社会各界的关注。大数据已经成为一种战略资源，具有广阔的应用前景。

2021-03-16 15:52:06

大数据云计算物联网
大数据杀熟这件事，至少手机厂商开始行动了，这是好事情
对于大数据杀熟、隐私安全；对于我们普通用户而言，简直是防不胜防；遇见问题我们没有办法，而这两年关于大数据杀熟的事情报道很多，例如一个人长期在一个平台消费，其实你不一定能够享受到最低的优惠，反而针对新人，好长时间没有购买过产品的用户的返回卷消费更加有力度！

2021-03-16 14:49:36

大数据手机隐私
5大数据经典模型详解——数据分析师必须掌握

2021-03-16 11:45:15

大数据数据分析数据经典模型
5张图，看懂数据分析体系
讲数据分析体系的文章很多，经常是开篇一句：互联网分析体系……，下边几百个指标blabla汹涌而出。搞得很多同学很晕菜：这么多指标，实际中到底怎么看？今天系统讲解一下。话不多说，直接上场景。

2021-03-16 11:33:23

数据分析
“大数据杀熟”依旧且套路更深
今年2月7日，国务院反垄断委员会发布关于平台经济领域的反垄断指南，对消费者反映较多的“大数据杀熟”等问题作出专门规定。

2021-03-16 10:07:08

大数据互联网经济
上万字详解Spark Core
Spark 产生之前，已经有MapReduce这类非常成熟的计算系统存在了，并提供了高层次的API(map/reduce)，把计算运行在集群中并提供容错能力，从而实现分布式计算。

2021-03-16 08:21:29

Spark系统并行
零基础应该如何进行大数据的学习？
大数据行业，这个词语听起来有一些空洞，这对于我们很多想入门学习的小伙伴来说甚至还有一些迷茫，但其实说到大数据技术，大家对它的的第一印象不应该仅仅有“高薪”，还应该要有“高技术”所带来的高难度。

2021-03-15 22:56:55

大数据技术高薪
大数据让“假货”无处可逃
上海市消保委于3月11日披露了2020消费者投诉十大典型问题，其中假冒伪劣问题仍旧较为突出。尤其是随着短视频、直播带货等兴起，部分商家频频利用线上平台侵害消费者的利益。

2021-03-15 18:55:53

大数据网购短视频
吐血整理：大数据开源框架技术扫盲

2021-03-15 14:09:05

大数据大数据框架技术数据开发
大数据开发：Spark入门详解
众所周知，Spark 它是专门为大规模数据处理而设计的快速通用计算引擎，因此Spark它在数据的挖掘等领域便有着非常广泛的应用，而从现阶段来讲的话它也已经形成了一个高速发展并且应用相当广泛的生态系统了。所以，今天这篇文章便要为大家做一个Spark入门基础的简单介绍，满满干货，请不要错过。

2021-03-15 14:02:21

大数据数据开发Spark
大数据 “杀熟”背后：平台的精准 “算计”
又到一年 “3·15”，面对大数据时代的消费，在给我们的日常生活带来不少便利，但同时也带来了一些隐忧。

2021-03-15 11:03:58

大数据 “杀熟”“算计”
大数据在医疗行业的顶级应用
大数据有助于发现大量人群和患者的模式，从而为医疗机构提供更深入的见解。以下探讨大数据在医疗保健行业中的顶级应用。

2021-03-15 10:52:03

大数据医疗大数据应用
破解二代大数据杀熟，需要算法公平性
在大数据场景中，交易越来越多依靠算法完成。互联网平台通过不断进阶的算法和算力，向消费者提供更为高效、丰富、精准的全领域优质服务。但在提高交易效率的同时，算法的不透明性与难解释性也给消费者权益保护与反不正当竞争带来了新的挑战。

2021-03-15 10:49:23

大数据算法人工智能
大数据分析工具BI的应用
大数据分析工具BI，是企业数据化管理的一整套方案，用于将企业中现有的数据进行有效整合，快速准确的提供决策依据，帮助企业做出明智的业务经营决策，解决企业管理问题。

2021-03-15 10:43:20

大数据数据分析工具
中国信通院解读：“十四五”规划里的大数据发展
近日，“中华人民共和国国民经济和社会发展第十四个五年规划和2035年远景目标纲要”（以下简称“十四五”规划）经第十三届全国人民代表大会第四次会议审查批准，正式发布。

2021-03-15 09:14:47

中国信通院大数据“十四五”规划
利用对比分析有效地说明数据结果和结论
对比分析是数据分析中最常用的、最好用、最实用分析方法之一。没有对比就不能说明问题，这也是对比分析在数据分析领域经久不衰的原因之一。

2021-03-15 08:40:46

数据分析波动
关于数据分析技能的思考
师兄之前和大家聊了聊找工作面试的要点。看了大家在后台留言，想了解下数据分析都需要懂什么工具，知道什么数学原理。今天我们就来聊聊关于数据分析的技能。

2021-03-15 08:25:49

数据分析互联网运营大数据
大数据中的偏见：如何发现它并减轻其影响
数据管道的不同部分都会产生偏见。人们非常关注在分析过程中可能出现的偏见，但其实偏见可能出现在数据管道的更早期阶段。

2021-03-14 18:20:07

大数据数据管道偏见
适合大数据行业的特质有你吗？
大数据行业一直以来都是作为高薪行业，程特别是最近几年各个岗位也非常吃香，所以有不少人转行学大数据，无论是零基础的小白还是在工作遇到瓶颈需要转方向提升自我的人，但是这里面有些人是一学就会，当然就会有人久久不能入门，那究竟做大数据行业的人都有什么特质呢，今天就一探究竟

2021-03-14 15:05:22

大数据程序员游戏
如何阅读百万行 Hadoop 的源码？
首先 hadoop 是用 java 写的，所以一些 java 基础知识必不可少，比如锁，线程，设计模式，java 虚拟机，java io，不求很深入，基础得知道。

2021-03-13 14:08:00

Hadoop 源码HDFS
上一页 1 ··· 4748495051 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服