51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术25年5月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9065内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9065 条
大数据下的用户画像和标签体系构建
今天谈下对大数据下的用户画像和标签体系构建的一些关键点思考，对于用户画像和标签体系构建实际上网上已经有很多相关的历史文章可以参考，今天文章这篇文章不会系统地去谈整体的构建方法步骤，而是搞清楚里面的一些关键逻辑。

2021-03-09 10:06:34

大数据画像数据采集
大数据分析工程师入门11-Hue&Zeppelin
日常数据分析工作中，很多时候都在处理临时性的需求，这种需求要求快速响应和很快得出结果，如果每一个需求都需要写在代码文件中，然后编译打包上传再执行，就会非常浪费时间，尤其是写出来的查询语句频繁出错，需要不断改正再重复打包上传的时候。

2021-03-09 09:53:03

大数据数据分析Hue
平均值真的是最优解吗？何不试试用数据分箱进行结构化分析
平均值是数据分析中常用的方法，是利用特征数据的平均指标来反映业务目前所处的位置和发展水平。平均值虽好，但是它真的可以反应业务的真实形态吗?答案当然是否定的。

2021-03-09 08:39:24

数据结构化分析
手机越贵，打车就越贵？大数据杀熟新玩法曝光，苹果用户要哭了
近些年，由于互联网和移动互联网的发展，崛起了很多独角兽企业，它们搭建的平台给用户带来了方便。但这些独角兽企业也是一把双刃剑，除了好处，也带来了许多负面问题，“大数据杀熟”就是典型的例子。所谓“大数据杀熟”就是针对不同的用户，进行区别对待，同样的产品服务卖不同的价位。

2021-03-08 22:03:27

大数据互联网苹果
如何通过学习大数据拿到高薪Offer ?
如果要问这几年最火的行业是什么？当然要属非互联网行业。我们身处这个社会，一定可以深切的感受到互联网的发展带来的各项福利，不管是社会的变革，还是我们从身边最细微的小事来看，互联网这个行业它都在不断的改变着我们的方方面面。

2021-03-08 21:46:00

大数据互联网工程师
组织应该避免的6个大数据错误
全球各地的营销人员如今正在实施数据驱动的营销，以从其营销活动中获得更好的结果。但是在这样做时，需要处理大量数据，在使用大数据时可能会犯一些错误。

2021-03-08 16:47:24

大数据错误大数据
Apache四个大型开源数据和数据湖系统
四个大型数据和数据湖的大型Apache系统，Apache Shardingsphere，Apache冰山，Apache Hudi和Apache IotdB

2021-03-08 15:42:54

数据库Apache Iceb开源
手机越贵打车越贵 滴滴客服回应：并不存在该情况
近几年，随着互联网和信息技术的飞速发展，网约车平台如雨后春笋般进入我们的生活，快捷、干净、随叫随到等诸多优势，成了网约车受追捧的主要因素。不过，近日一则“手机越贵，打车费越贵”的消息，成为网友热议。

2021-03-08 15:28:18

滴滴网约车大数据
人体互联网助力健康大数据的前景与风险
人体互联网的发展将极大程度的帮助社会更直观且及时的获取人体健康数据，为健康大数据及公共健康事业开拓更大的发展前景。但考虑到人体互联网产出的数据具有极高的隐私性和敏感性，如何治理人体互联网数据以规避其带来的风险也是值得当今社会深入探讨的问题。

2021-03-08 11:26:12

大数据互联网健康
大数据vs数据科学：解开谜团认识差异
有没有想过是选择大数据还是数据科学？如果你对数据感兴趣，又是一个技术怪胎，你可能至少有一次会陷入这样的困境。

2021-03-08 10:41:10

大数据数据科学数据
非法获得大数据存在隐患
我国现行的《反垄断法》是2008年生效的，几乎没有涉及互联网行业，在数字经济时代已经受到了新的挑战。

2021-03-08 10:33:15

大数据互联网
大数据如何更好地服务于国家发展战略
数字经济不仅改变了经济增长结构，而且提升了经济增长质量，对科技创新、全要素生产率的提高具有重要意义。

2021-03-08 10:18:40

大数据互联网大数据应用
ML和数据趋势：总结2020，并研究和超越2021
正如我们刚刚进入咆哮的数据20，我们希望突出一些我们在数据和ML基础架构内展开得令人兴奋的趋势。

2021-03-08 09:28:10

ML数据机器学习
两会声音 | 童国华：运用大数据模型进一步延展数据共享机制的“触角”
目前，全国各地正积极建设政务大数据平台，努力实现数字化转型。而在此过程中，因缺乏统一的规范及技术标准，导致数据融合共享工作推进缓慢，各类政务事项办理效率受限于传统封闭机制及信息化壁垒难以提升。

2021-03-08 09:18:14

大数据两会声音大数据应用
深入剖析 HDFS 3.x 新特性-纠删码
HDFS是一个高吞吐、高容错的分布式文件系统，但是HDFS在保证高容错的同时也带来了高昂的存储成本，比如有5T的数据存储在HDFS上，按照HDFS的默认3副本机制，将会占用15T的存储空间。

2021-03-08 08:42:26

HDFS纠删码存储
牛刀小试-《你好，李焕英》影评词云
最近，贾玲导演的电影《你好，李焕英》在春节档一众电影中脱颖而出，成为了一匹黑马，更是中国影史上第三部票房破50亿的电影。我们从豆瓣上看到，该影片当前评分是8.1分，接近30%的评价都是5颗星。今天我们就来从豆瓣上爬取一部分影评，结合jieba和pyecharts做个分词和词云图。

2021-03-08 08:21:19

词云数据可视化大数据
图样图森破Pyecharts之词云图
在做文本分析和关键词统计的时候，我们经常会使用到词云图来展示关键词词频。pyecharts当然也支持词云的生成，并且还可以自定义词云形状。

2021-03-08 08:11:09

Pyecharts可视化工具云图
大数据时代，93%的人类行为是可以预测的！
在大数据时代，全球复杂网网络权威，物理学家巴拉巴西通过研究后指出：“93%的人类行为是可以预测的！”这是一个颠覆性的结论。如果我们能够获得足够多的数据，这意味着，我们的商业行为同样可以进入可掌控的范围——而这就是大数据里的秘密。

2021-03-07 22:27:23

大数据网络视频
数据分析平台Chartio关闭了，有什么替代方案么？
您可能已听过，Chartio正在被Atlassian获取。在收购后，看起来许多公司依靠的分析平台就没有了。

2021-03-07 09:07:04

数据分析平台数据分析Chartio
巨头大数据杀熟屡试不爽，普通用户要如何反“杀熟”？
在我们原有的观念里一个人创业不管是开店或者是开公司，能不能活下来，最重要的就是有没有大量的老客户，老客户越多那么就越能很好的生存下来，也就能赚到钱。

2021-03-07 00:34:30

大数据互联网技术
Orca：大数据模块化查询优化器体系架构
优秀的和平庸的优化器之间的差异一直是众所周知的[。但是，这些系统必须处理的数据量越来越大，从而加剧了优化错误，并比以往任何时候都需要强调查询优化的重要性。

2021-03-06 09:57:35

大数据Orca查询优化器
记一次CDH集群升级事故的解决
由于我们的应用系统是基于 Hive 的离线计算作业，hive升级不成功，应用应用无法启动，该问题亟待解决。

2021-03-05 22:41:55

CDH集群CDH集群
手机越好，打车越贵？如何不被大数据杀熟
从去年8月开始，复旦大学管理学院孙金云教授招募了多名大学生当调研员，安排他们在上海、北京、深圳、成都和重庆5个城市，使用7个平台，专门打车800多次，花费5万元换回了一份打车报告。

2021-03-05 16:25:36

大数据手机苹果
大数据行业跳槽面试前你需要做什么？
要知道，很多人决定跳槽前其实都是迷茫的，当下决定跳槽可能会有很多想法跟原因，但是问起接下来的具体规划时可能就会显得有些迷茫和无措。我们生来都是普通的人，所以面对大数据行业这个在外人看来略显枯燥的工作岗位时，有的人可能不喜欢但有的人可能就沉浸在这份热爱中。

2021-03-05 14:55:31

大数据面试跳槽
图样图森破-Pyecharts复合图
上一篇文章中我们介绍了柱状图的创建和配置，在第一篇文章中也附上了有关于折线图的代码示例。那么当你接到一个需求，要把两组量纲不一样的数据放到一起的时候，折线图、柱状图，你选哪一个呢？

2021-03-05 07:03:38

Pyecharts可视化工具复合图
数据分析师入职第一个月需要注意什么？
这里的求同，是谋求认同，也就是要在短时间内与公司其他人、其他部门建立强联系。数据分析岗跟其他岗位不同，千万不能一声不吭的埋头苦干，尤其是刚刚入职的时候，很多人都喜欢直接扑在分析岗上，专注于自己的事情，这是万万不可取的！

2021-03-04 22:30:59

数据分析职场工作
大数据行业到底有多好？发展前景？福利待遇？
随着信息化社会的不断普及，我们肉眼可见的新新行业在不断崛起。近年来，可能无数人都有听说过哪个哪个行业工资真的好高啊，要不要转行去做那个行业，没错，就是日渐与我们生活息息相关的大数据行业，低投资高回报的事情大概是每个人都梦寐以求的，但是这的确不是一件容易的事。

2021-03-04 15:51:59

大数据薪资数据分析
当今嵌入式和自助服务分析的最佳实践
分析的新基线要求数据讲述一个故事。 解决方案必须包括嵌入式应用程序，快速自助服务和实时交付和视觉效果。

2021-03-04 11:06:05

自助服务
Spark性能调优-RDD算子调优篇
Java的序列化机制使用方便，不需要额外的配置，在算子中使用的变量实现Serializable接口即可，但是，Java序列化机制的效率不高，序列化速度慢并且序列化后的数据所占用的空间依然较大。

2021-03-04 08:39:21

SparkRDD调优
不用代码趣讲 ZooKeeper 集群
引入了集群前，原本一个节点数据自己内部运作管理就行，非常方便，但是引入集群后，集群间的节点如何沟通成了问题，让我们一起来看看马果果的新员工们是怎么做的吧?

2021-03-04 08:06:15

ZooKeeper集群代码
2021年后求职分析：你敢裸辞吗？
春节假期已经过完了，对于打工人来说，即将迎来“金三银四”的招聘和求职旺季，我们知道，年后求职机会多，同样竞争压力也比较大。

2021-03-03 23:15:53

数据分析就业辞职
关于构建数据仓库的几个问题
数据仓库(Data Warehouse)是一个面向主题的(Subject Oriented)、集成的(Integrated)、相对稳定的(Non-Volatile)、反映历史变化(Time Variant)的数据集合，用于支持管理决策(Decision Making Support)。

2021-03-03 21:24:57

数据仓库工具
大数据和分析解决方案如何在数字时代彻底改变业务?
随着其采用率的快速上升，大数据分析市场规模预计到2022年将达到2743亿美元，2018～2022年的复合年增长率为13.2%。

2021-03-03 11:05:08

大数据云计算大数据分析
大数据的关键技术有哪些？
大数据是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

2021-03-03 09:32:21

大数据关键技术数据存储
最接地气的数据分析详细流程，看这篇就够了！
无论你是刚接触数据分析，还是一位分析大神，我想很多人都不知道，数据分析究竟是什么，或者说数据分析的本质是什么。

2021-03-03 05:59:20

数据分析互联网运营大数据
聊聊Hive中的集合数据类型
除了使用础的数据类型string等，Hive中的列支持使用struct, map, array集合数据类型。

2021-03-02 21:52:48

Hive数据类型
2021年我还能选择大数据这个行业吗？
众所周知，我们经常可以听到说程序员月薪几万，年薪几十万上百万，可能很多不了解的外行朋友听来会觉得是不是有些浮夸，但是可以负责任的告诉你，这些都是真的。

2021-03-02 16:27:32

大数据程序员IT
云计算、大数据与人工智能三者的关系
当今智能行业最为热门的话题无非就是云计算、大数据与人工智能。它们之间好像互相有关系，一般谈云计算的时候会提到大数据，谈人工智能的时候会提大数据，谈人工智能的时候会提云计算……它们相辅相成、不可分割。若非技术人员，可能会较难理解这三者间的相互关系，所以有必要解释一下。

2021-03-02 11:32:03

云计算大数据人工智能
聊聊工业互联网数据分类分级那些事儿
技术的发展与变化，推动了社会的变革。当今社会向着工业化、信息化和经济一体化的生产力高度发达的现代化形态发展。

2021-03-02 11:06:17

工业互联网
大数据时代年轻人更关注哪些领域
首先，在大数据时代背景下，年轻人更应该关注如何借助于大数据来实现自身的价值，从当前的技术发展趋势和社会发展趋势来看，年轻人未来会重点关注三个领域，其一是创新、创业的热点领域，其二是高附加值领域，其三是娱乐、消费领域。

2021-03-01 19:11:10

大数据技术金融
大数据的调查表明多样性可以有效阻止勒索软件攻击
通过采用大数据技术进行的调查，如今的组织面临着更大的网络攻击风险，采用适当的预防措施应该有助于最大程度地减少这些担忧。

2021-03-01 13:39:56

大数据
2021年大数据和分析4大趋势
大数据是一个术语，它被用来描述处理数据的技术和实践，这些数据不仅数量大，速度快，而且有许多不同的形式。埃隆·马斯克的自动驾驶汽车以及杰夫·贝佐斯的无人便利店背后，都有一个复杂的大数据系统和一支聪明的数据科学家队伍，他们已经把愿景变成了现实。

2021-03-01 10:38:26

大数据数据分析
RBAC模型整合数据权限
在项目实际开发中我们不光要控制一个用户能访问哪些资源，还需要控制用户只能访问资源中的某部分数据。

2021-03-01 09:29:55

数据权限模型
大数据和人工智能-从机械思维到统计思维
今天准备写一篇文章来谈大数据，人工智能和事物认知问题解决之间的关系逻辑。因此这篇文章不会谈底层的实现技术，而更多的会谈在整个信息技术革命下思维逻辑的发展演进过程，并对相互之间的关系做进一步思考。

2021-02-28 13:57:51

大数据人工智能信息
避免7个常见的数据管理陷阱
在当今的大数据世界中，云技术是必不可少的，因此大数据投资显然是有优势的，但是管理不善可能意味着未来的工作量更多。

2021-02-28 13:19:42

大数据IT数据管理
4种数据分析基础方法，终于有人讲明白了
提到数据分析的基础方法，大家肯定很容易想到对比、细分和趋势，但是这些都是非常基础的入门理论，本文不会涉及。本文主要介绍产品经理在管理整个项目、解决整个项目的问题的时候，需要用到的数据分析方法。

2021-02-28 12:47:27

数据分析科学技术
Zookeeper实现分布式锁的原理
相信大部分面试都是说用 Redis 去实现分布式锁，用 Zookeeper 实现分布式锁相对而言遇到的较少，最近在整理之前的面经答案，因此特意写篇博客解释一下。

2021-02-28 07:49:28

Zookeeper分布式锁
一日一技：可视化分析 Redis Key 资源占用情况
Redis 在日常的开发中，会积累大量的 Key，占用不少内存空间。有时候，我们想知道当前 Redis 里面有多少个 Key，是哪个 Key 占用了最大的内存。

2021-02-27 10:49:13

可视化分析资源
数据科学中的三大统计悖论
观察到令人惊讶的现象，例如在汇总数据中完全还原的子组趋势，的确不罕见。在本文中，我们研究了数据科学中遇到的三种最常见的统计悖论。

2021-02-27 09:28:09

数据科学数据
Gartner 2021 年数据和分析领域十大趋势
从AI到小数据和图形技术，数据和分析领导者应考虑充分利用这些趋势。

2021-02-26 11:09:09

Gartner数据技术
上一页 1 ··· 4849505152 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服