51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术25年5月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9088内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9088 条
零基础使用Swift学习数据科学
Python被广泛认为是数据科学中最好、最有效的语言。近年来我遇到的大多数调查都将Python列为这个领域的领导者。但事实是数据科学是一个广阔并且不断发展的领域。

2019-11-11 14:09:17

Swift数据科学语言
一份不可多得的数据科学与机器学习Python库 原创
本文全面地介绍了当前市场上适合于数据科学和机器学习的优秀 Python 库。

2019-11-11 09:10:19

机器学习Python数据
华宇杨海涛：零售银行业务应重视存量客户价值深度挖掘 原创
日前，由中国信息通讯研究院主办的2019(第二届)中国金融科技产业峰会在北京国际会议中心隆重召开。在“人工智能在金融领域应用”分论坛研讨会上，华宇金融事业部副总经理杨海涛以《零售银行业务智能化管理》为核心议题，分享了关于银行在零售业务中智能化管理的一些建议，探讨了银行在未来零售战略转型中主要的发展趋势。

2019-11-08 22:19:50

金融科技银行零售业务数据应用
MapReduce：大型集群上的简化数据处理
在MapReduce开发之前，作者和其他许多的Google员工实现了数以百计的处理大量原始数据(如抓取到的文档、Web请求日志等等)的专用计算方法，以计算各种导出的数据，如倒排索引、Web文档图结构的各种表示、每个host抓取到的页面数的总结、某一天最频繁的一组查询。

2019-11-08 14:31:45

MapReduce数据集数据结构
数据转换率较低将如何严重影响机器学习
如今，机器学习以多种有益的方式改变着市场的未来发展。数字营销研究机构的调查报告表明，97%的决策者认为机器学习技术将促进未来市场发展。

2019-11-07 21:21:08

数据转换机器学习营销
正式开源TKE和TBase，腾讯正成为大数据领域开源最全面厂商
在11月6日召开的Techo开发者大会上，腾讯云副总裁、腾讯数据平台部总经理蒋杰博士正式对外披露腾讯大数据平台10年技术演进历程。经过10年的积累，腾讯大数据平台的算力资源池目前已有超过20万台的规模，每天实时数据计算量超过30万亿条，腾讯已经成为中国实时数据计算量较大的公司。

2019-11-07 21:09:21

腾讯开源大数据
大数据平台常见开源工具集锦，看看你都知道哪些
大数据平台是对海量结构化、非结构化、半机构化数据进行采集、存储、计算、统计、分析处理的一系列技术平台。大数据平台处理的数据量通常是TB级，甚至是PB或EB级的数据，这是传统数据仓库工具无法处理完成的。

2019-11-06 15:01:30

大数据Hadoop技术
大数据在应用程序监控中的重要性与日俱增
应用程序监控中的大数据正在变得更加重要，人们需要了解它如何工作以及为什么有用的知识。大数据催生了许多新的应用，移动设备和台式电脑都能够使用更复杂的应用程序来为世界各地的用户提供服务。

2019-11-06 11:38:43

大数据工具人工智能
Python数据分析必知必会：TGI指数
经常有一些专业的数据分析报告，会提到TGI指数，例如“基于某某TGI指数，我们发现某类用户更偏好XX”。对于不熟悉TGI定义的同学，看到类似的话一定是云山雾罩。这次，我们就来聊一聊什么是TGI指数以及怎么样结合案例数据实现简单的TGI偏好分析。

2019-11-06 10:56:59

Python数据分析TGI
基于HBase和Spark构建企业级数据处理平台
基于HBase和Spark构建企业级数据处理平台,面临的场景:金融风控;个性化推荐；社交Feeds;时空时序以及大数据等。

2019-11-06 10:43:20

HBaseSpark数据处理平台
HDFS架构详解！会了这个，Hadoop还难理解吗？
Hadoop是目前大数据领域最主流的一套技术体系，包含了多种技术。包括HDFS(分布式文件系统)，YARN(分布式资源调度系统)，MapReduce(分布式计算系统)，等等。

2019-11-06 08:54:21

HDFSHadoopMapReduce
Python数据可视化：箱线图多种库画法
箱线图通过数据的四分位数来展示数据的分布情况。例如：数据的中心位置，数据间的离散程度，是否有异常值等。

2019-11-05 15:58:31

Python数据可视化箱线图
兄弟，这种思路讲解HDFS你肯定没见过，快速入门Hadoop必备
大数据技术主要要解决的问题的是大规模数据的计算处理问题，那么首先要解决的就是大规模数据的存储问题。

2019-11-05 09:35:26

HDFSHadoopRAID
媲美Pandas的数据分析工具包Datatable
在数据科学领域，与默认的 Pandas 包相比，datatable 模块具有更快的执行速度，这是其在处理大型数据集时的一大优势所在。然而，就功能而言，目前 datatable 包所包含的功能还不如 pandas 完善。相信在不久的将来，不断完善的 datatable 能够更加强大。

2019-11-04 15:00:01

DatatableR语言数据科学
大数据架构详解：从数据获取到深度学习
机器学习(Machine Learning，ML)是一门多领域交叉学科，涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。其专门研究计算机是怎样模拟或实现人类的学习行为，以获取新的知识或技能，重新组织已有的知识结构，使之不断改善自身的性能。此外，数据挖掘和机器学习有很大的交集。

2019-11-04 14:28:55

机器学习大数据数据挖掘
一则关于大数据的要闻：大数据生于2006，卒于2019！这是真的吗？
由于关注的重心从我们收集数据的方式转向实时处理数据，大数据时代即将终结。大数据现在是支持多云、机器学习和实时分析这几个新时代的业务资产。大数据时代生于2006年4月1日，卒于2019年6月5日

2019-11-04 14:25:54

大数据Hadoop大数据时代
企业在机器学习中容易犯的五个错误
机器学习技术的发展已使人们能够从企业的各种结构化或非结构化内容中提取更多的信息和情报。

2019-11-01 14:19:02

大数据机器学习工具
收藏！盘点很实用的数据科学Python库
数据科学是一门研究数据并从中挖掘信息的学科。它不要求自创或学习新的算法，只需要知道怎么样研究数据并解决问题。这一过程的关键点之一就在于使用合适的库。本文概述了数据科学中常用的、并且有一定重要性的库。

2019-11-01 13:37:53

Python数据结构编程语言
为什么说，大数据与行业专家是“共生”关系？
在所有人都知道“大数据需要落地”的当下，通过这个低调的案例，我想告诉你：传统产业积累的大数据当然是一座亟待挖掘的金矿，但前提是，“挖掘机”必须掌握在行家手里。

2019-10-31 15:49:10

大数据专家共生关系
数据分析入门经典问题：你两个朋友同一天过生日的概率有多大？
假如把N个人分成一组，至少有两个人是同一天生日的概率是多少?现在来猜一猜：假设这一组有N=30个人。那么有两个人在同一天吃生日蛋糕的概率是多少呢?我们换个说法：你敢不敢用10美元赌里面有两个同月同日生的人?

2019-10-31 14:49:13

数据分析数值
大数据和人工智能：3个真实世界的用例
大数据和人工智能够帮助企业以新的方式改善客户体验。人工智能和大数据之间的关系是双向的。可以肯定的是：人工智能的成功很大程度上取决于高质量的数据，同时，管理大数据并从中获取价值越来越多地依靠(诸如机器学习或自然语言处理等)人工智能技术来解决对人类而言难以负担的问题。

2019-10-31 14:10:35

大数据人工智能工具
Pandas的五项高级功能及使用方法 译文
你用Python准备数据时，Pandas库提供了核心功能。但许多人只了解基础的方法，本文介绍的这些鲜为人知的高级方法让你更轻松整洁地处理数据。

2019-10-31 10:16:06

数据Python开发
大数据干货分享：大数据集群的自动化运维实现思路
本文将从大数据集群面临的挑战、自动化运维系统的设计原则、工具选择等方面阐述大数据集群的自动化运维实现思路。

2019-10-31 09:59:36

大数据Hadoop大数据集群
Hadoop 生态之 MapReduce 及 Hive 简介
Hadoop 是一个计算框架，目前大型数据计算框架常用的大致有五种：仅批处理框架：Apache hadoop；仅流处理框架：Apache Storm、Apache Samza；混合框架：Apache Spark、Apache Flink.

2019-10-31 09:52:02

HadoopJava大数据
大数据干货：Hadoop 面试中 7 个必问问题及答案
Hadoop是一个开源软件框架，用于存储大量数据，并发处理/查询在具有多个商用硬件(即低成本硬件)节点的集群上的那些数据。

2019-10-30 15:08:09

大数据Hadoop数据中心
需要考虑的工业4.0大数据挑战
随着技术的发展，企业必须考虑到工业4.0的大数据挑战。企业实现工业4.0的目标是简单的：很大限度地提高效率和利润，更精简地运营，并在可能的情况下在危险或重复的领域引入自动化技术。

2019-10-30 11:00:14

大数据工业4.0技术
为什么只靠大数据不能加快企业的决策
关于大数据系统也有一些坏消息：这些工具不会帮助企业更快地做出决定。一家中型企业就大数据计划进行合作。在过去的七年中，该计划涉及了许多项目，所有这些项目都致力于将组织的数据置于每个决策和流程的前沿。

2019-10-30 10:38:48

大数据系统技术
Python常用的算法——贪心算法（又称贪婪算法），你知道吗？
贪心算法(又称贪婪算法)是指，在对问题求解时，总是做出在当前看来是最好的选择。也就是说，不从整体最优上加以考虑，他所做出的的时在某种意义上的局部最优解。

2019-10-29 15:09:52

Python贪心算法代码
为什么数据科学的专业认证越来越重要？
数据科学家是当下非常受欢迎的技术人才之一。美国职场网站Glassdor的数据显示，数据科学家已连续四年位居美国职业之首，并日益成为业务增长的重要组成部分。随着对数据科学人才需求的增加以及人们对数据科学重要性认识的加深，有必要进一步规范这一职业。

2019-10-29 15:03:34

数据科学认证职业
学习Kafka，先从这四个基础概念入手
Kafka 是一个消息系统，原本开发自 LinkedIn，用作 LinkedIn 的活动流(Activity Stream)和运营数据处理管道(Pipeline)的基础。现在它已被多家不同类型的公司 作为多种类型的数据管道和消息系统使用。

2019-10-29 14:54:20

Kafka消息系统分布式
刚刚更新过的大数据书单推荐给你
给大家推荐一份大数据书单，好像这份书单很久没有人更新过了，我搜罗了一份与您共享。

2019-10-29 14:48:17

大数据书单虚拟化
人工智能和自动化改善过程挖掘的6种方法
创建企业的数字孪生、识别机器人流程自动化(RPA)等自动化技术并将孤立的任务连接到流程中，是首席信息官推进流程时发现的几种方法。

2019-10-29 14:07:24

大数据人工智能技术
云计算数据仓库的下一步是什么
如果说多云是当今数据仓库采用的战略，那么跨云就是它对未来的愿景。这种预测来自于一种普遍的需求，即在不同云计算提供商的不同区域之间，甚至在不同的云平台之间无缝地移动和交换数据。

2019-10-28 13:54:45

多云数据云计算
不到70行Python代码，轻松玩转RFM用户分析模型
本文从RFM模型概念入手，结合实际案例，详解Python实现模型的每一步操作，并提供案例同款源数据，以供同学们知行合一。

2019-10-26 13:59:35

PythonRFM模型数据
永洪科技发布桌面智能分析产品 让人人都是数据分析师成为可能 原创
10月25日，以“智同道合，数创未来”为主题的数据分析技术与应用高峰论坛在北京举行。本届论坛由永洪科技主办，永洪科技专家携手众多合作伙伴、行业专家，共同探讨前沿的大数据技术发展，分享大数据成功实践经验，并见证永洪科技自主研发的黑科技的诞生。

2019-10-25 15:55:18

永洪科技大数据分析
如何从企业IT人员成长为优秀的数据分析师？
大公司里的IT技术人员以系统为中心来处理数据，他们一般都拥有许多技能，比如编程、系统开发、系统支持、商业支持以及跨职能团队合作的能力，也正是这些技能使得他们能胜任数据分析师的工作。

2019-10-25 15:48:09

数据分析师IT技术人员数据科学
10分钟零基础就可搞懂的Hadoop架构原理，阿里架构师详解
我今天花了大半个下午的时间，写了这篇hadoop的架构，全篇都是以大白话的形式，也算是为后面更加详细的每一部分开了个好头吧，如果喜欢请点转发和关注，如果有疑问，直接在评论里说出来，大家一起解决，才能进步。

2019-10-24 15:15:19

Hadoop框架数据
Excel，Python全都靠边站，这才是数据分析应该有的样子
面对这么庞大的数据，python还不太熟练的她束手无策，excel就更不用说了，这么大的数据卡死简直是分分钟的事，万般无奈之下，她向专业做数据分析的我请教该怎么办。

2019-10-24 15:11:10

数据分析PythonFineBI
10分钟零基础就可搞懂的Hadoop架构原理，阿里架构师详解
我今天花了大半个下午的时间，写了这篇hadoop的架构，全篇都是以大白话的形式，也算是为后面更加详细的每一部分开了个好头吧，如果喜欢请点转发和关注，如果有疑问，直接在评论里说出来，大家一起解决，才能进步。

2019-10-24 11:03:56

HadoopGoogle硬件
51信用卡被查引发“爬虫技术”争议 是否侵犯个人信息？
据中国之声报道：近日，“51信用卡”被查事件，让本就处在风口浪尖的大数据风险控制领域，再添一把“火”。业内人士透露，在隐私保护薄弱、数据安全存在漏洞的国内互联网环境中，爬虫技术往往与信息来源违法、滥用等问题交织在一起。

2019-10-24 10:40:40

技术爬虫互联网
官方调研重磅发布，Pandas或将重构？
为指引 Pandas 未来开发方向，Pandas 官方团队于 2019 年夏搞了一次调研，这次调研历时 15 天，共有 1250 条反馈数据。问卷数据保存在 data 文件夹的 2019.csv.zip 文件里。

2019-10-24 09:45:03

Pandas数据分析重构
数据科学：合成数据如何解决匿名化问题？
现在，随着GDPR的生效，企业在保护数据时必须格外小心。传统匿名通常不是真正的匿名，最终个人身份是可以识别的。对数据添加额外级别匿名化的一种方法是引入合成数据。

2019-10-23 19:33:24

数据科学保护数据匿名化
数据分析必会的六大实用模型
对于刚刚接触数据分析的人来说，经常会有这样的困惑和疑问：数据分析究竟难不难?难的话难在哪?为什么有时候作分析不知道从何下手，只能眉毛胡子一把抓?

2019-10-23 19:27:38

数据分析模型分析
公司如何选择数据库？DynamoDB、Hadoop和MongoDB 大比拼
随着公司数据存储方式的不断扩展，本文旨在比较公司使用的一些更现代的数据库系统——了解DynamoDB，Hadoop和MongoDB可以提供哪些功能将帮助用户针对业务模型做出更好的决策。

2019-10-23 15:06:23

HadoopMongoDB数据库
如何用通俗地解释大数据
根据调研机构Forrester公司的调查，目前全球32%的电信决策者正在应用或扩展边缘计算设施，另有27%的电信决策者表示计划在一年内构建边缘基础设施。而组织采用边缘计算的主要动力包括对带宽、成本和延迟的敏感性。

2019-10-23 14:51:49

大数据存储技术
数据分析师：数据驱动型业务决策的关键角色
随着组织快速发展其分析能力，数据分析师的角色需求很大。根据调研机构IDC公司今年4月预测，大数据和业务分析解决方案的收入将达到1,891亿美元，到2022年将实现两位数的增长。

2019-10-23 14:29:09

数据分析师数据科学统计
以“矩·变”为主题 神策2019数据驱动大会于北京举行
10月22日，以“矩•变”为主题的神策2019数据驱动大会在北京维景国际大酒店顺利举行，来自全球大数据各大行业的专家聚首北京，融合国际前沿技术与行业实践，深入探讨大数据时代下的新生态、新洞察、新趋势。

2019-10-22 13:58:11

神策数据驱动大会
改进大数据分析以应对网络安全挑战
为了应对网络安全挑战和威胁，组织必须改进大数据分析。这就是大数据分析很重要的原因。大容量存储和移动计算的进步带来了“大数据”这个新兴技术。而其这些技术的进步和发展带来了可以实时处理大量信息的解决方案和工具。这就是大数据分析的需求变得如此“巨大”的原因。

2019-10-22 13:33:44

大数据数据分析技术
适用于数据项目的7种强大的开源工具
功能强大的数据项目开源工具将使企业的业务更加无缝和功能化。无论是数据科学专业人士还是想要帮助企业成功地完成数据科学项目的IT部门，需要使用一些必不可少的数据科学工具。

2019-10-22 11:11:16

大数据工具容器
使用DC/OS为企业数据科学加速！ 译文
这篇逐步介绍的教程介绍了使用Tensorflow将DC/OS Data Science Engine设置成PaaS，用于支持分布式多节点多GPU模型训练。

2019-10-22 08:00:22

数据科学AWSDC
上一页 1 ··· 7677787980 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服