51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术25年5月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9088内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9088 条
聊天机器人的“高情商”炼成术
近年来，聊天机器人受到了学术界和工业界的广泛关注，基于聊天机器人系统的应用也层出不穷。相信在不久的将来，一个能够让人们与之无所不谈的高“情商”聊天机器人将走入我们的日常生活，成为我们的朋友、同事甚至是家人。

2016-02-16 14:46:33

聊天机器人机器学习自然语言
Hadoop之父Doug Cutting眼中大数据技术的未来
2016,Hadoop走过第十个年头。Hadoop之父Doug Cutting1985年毕业于美国斯坦福大学，早期的他并不是一开始就决心投身IT行业的。他如何成为Hadoop之父？Hadoop的发展和未来期待又是如何的？

2016-02-16 14:30:00

HadoopDoug Cuttin大数据
Hadoop/Spark生态圈里的新气象
Hadoop绝对没有消亡，不过我确信，知名研究机构Gartner的下一篇文章会这么认为。但Hadoop绝不再是原来的Hadoop。现在你需要知道这个新的Hadoop/Spark生态圈里面有什么。

2016-02-16 13:56:00

HadoopSpark生态圈
事实上，Spark是一项非常值得学习的技术
如今，诸如亚马逊、eBay和雅虎等公司都开始采用Spark技术。许多机构将Spark部署在上千个节点的集群中。事实上，Spark是一项非常值得学习的技术。

2016-02-16 10:34:42

Spark大数据数据处理
助你玩转机器学习技术的十三套框架 译文
在今天的文章中，我们将共同了解十三款机器学习框架，这些框架中最值得关注的特性，在于它们正致力于通过简单而新颖的方式应对与机器学习相关的种种挑战。

2016-02-16 09:58:38

机器学习框架大数据
阻碍大数据项目实施的四大绊脚石
在实施大数据时，往往有许多绊脚石阻碍项目的进，比如复杂的软件、懂技术的员工不够多、投资回报率难以平衡等等 。我们究竟该如何解决在实施大数据过程中出现的如上障碍?本文提到的4大战略可以助你将走向大数据之路的绊脚石们一扫而光!

2016-02-15 10:30:24

大数据大数据实施实施战略
随机世界与大数法则中渗透出的概率的意义
在最终的分析中，所有知识皆为历史；在抽象的意义下，所有科学皆为数学；在理性的世界里，所有判断皆为统计。

2016-02-15 09:49:21

随机世界大数法则概率
提升R代码运算效率的11个实用方法
R 是一款优秀的开源统计应用语言，它直观、易用、低成本，而且还有庞大的社区支持。但是当我们利用R语言处理大型数据集时，for循环语句的运算效率总是非常低。本文将介绍几种方法，帮助你以轻松地处理1亿行以上的数据集。

2016-02-15 09:25:00

R语言运算效率大数据
【专题】可视化技术 展现大数据之美 原创
想要理解大数据，使之更贴近大多数人，最重要的手段的之一就是数据可视化。数据可视化标识导向系统，包括文字的，如街头的路标指引你到高速公路，还有象征的，如颜色、大小或位置的抽象元素传达的信息等。

2016-02-02 16:07:32

可视化大数据数据可视化
Cloudera：2016年Hadoop的三大预测
众所周知，2015年又是Apache Hadoop标志性的一年。就在我们认为2015年就这样过去了，真正的Hadoop时代却来临了，我们有很多事情需要继续做下去。我们看到Apache Spark已经成为主流 ，Kudu(孵化中)的全新储存能力也加入进来，安全也更加卓越。难以想像后面还会有什么，但这正是Hadoop的美妙之处：永不止步、无限可能。至于结果，我们总是惊奇地拭目以待。

2016-02-01 15:32:03

HadoopCloudera
数据挖掘领域十大经典算法
本文介绍了ICDM早前评选出的数据挖掘领域的十大经典算法。便拿出一种来都可以说，它在数据挖掘领域都产生了极为深远的影响。让我们通过本文了解一下。

2016-01-29 11:00:55

数据挖掘算法大数据
美团是如何通过优化搜索排序提升转化效果的
和传统网页搜索问题相比，美团的搜索排序有自身的特点——90%的交易发生在移动端。一方面，这对排序的个性化提出了更高的要求；另一方面，我们由此积累了用户在客户端上丰富准确的行为，经分析获得用户的地理位置、品类和价格等偏好，进而指导个性化排序。

2016-01-29 10:39:35

排序搜索美团
这些大酒店用大数据和分析技术对我们做了什么？ 译文
酒店和酒店服务业也许刚开始使用大数据，但是它有令人羡慕的数据数量和种类可供利用。从订房那一刻起到退房那一刻，客户留下的第一条数据痕迹，都被分析人员开始认真地转变成可付诸行动的洞察力。

2016-01-29 10:05:13

酒店服务业大数据大数据分析
Java程序员使用的20几个大数据工具
今天我们就要说说大数据。根据维基百科，大数据是数据集的一个广义的术语，并且该数据集是如此庞大和复杂，以致于传统的数据处理应用程序无法胜任。

2016-01-28 14:39:04

大数据工具
果断收藏！六大主流大数据采集平台架构分析
大数据采集的挑战越来越突出。本文中我们将讨论几种流行的数据收集平台，它们大都提供高可靠和高扩展的数据收集。大多平台都抽象出了输入，输出和中间的缓冲的架构。利用分布式的网络连接，大多数平台都能实现一定程度的扩展性和高可靠性。

2016-01-28 10:26:59

大数据平台大数据采集架构分析
Spark Streaming 的玫瑰与刺
玫瑰篇主要是说Spark Streaming的优势点，刺篇就是描述Spark Streaming 的一些问题，做选型前关注这些问题可以有效的降低使用风险。说人话：其实就是讲Spark Streaming 的好处与坑。

2016-01-28 10:11:30

Spark StreaSpark大数据平台
大数据的六大人工智能变现方式
人工智能领域的一些理论和比较实用的方法，已经开始用于大数据分析方面，并显现出初步令人振奋的结果。至此大数据的价值变现潜能开始逐步被人工智能释放。同时，大数据技术的发展也将在为人工智能提供用武之地的同时，唤醒人工智能巨大的潜力，从而使这两个领域的技术和应用出现加速发展的趋势。

2016-01-27 13:54:21

大数据人工智能变现
已经证实提高机器学习模型准确率的八大方法
我从实践中学习了到这些方法。相对于理论，我一向更热衷于实践。这种学习方式也一直在激励我。本文将分享 8 个经过证实的方法，使用这些方法可以建立稳健的机器学习模型。希望我的知识可以帮助大家获得更高的职业成就。

2016-01-27 13:37:53

机器学习数据模型算法
友盟缔元信CNZZ合并为一 “友盟+”新领导层采访实录 原创
阿里巴巴收购友盟、缔元信.网络数据、CNZZ三家且合并为一家名为“友盟+”，今后会立足于独立的第三方全域大数据服务提供商，努力为企业客户和创业者提供全域大数据服务

2016-01-27 11:06:49

阿里友盟+采访
企业常见的三种数据部门架构优与劣
在一个企业中，可能数据部门在一个公司中组织架构中的位置，决定了部门的定位和一些做的事情，所以笔者认为，数据部门所处的组织架构对数据价值实现是一个很重要因素。

2016-01-27 10:25:31

数据分析数据架构数据价值
Gartner预警：千万别把数据湖与数据仓库混为一谈 译文
数据湖常常被厂商说成是应对大数据挑战的一种手段，它其实有助于你搞清楚针对你的数据提出的新问题，但前提是你得有相应技能。换句话说，别头脑发热将数据湖用于数据仓库

2016-01-27 09:49:19

Gartner数据湖数据仓库
打造全球最大的第三方全域大数据服务提供商 “友盟+”今起合并成立
2016年1月26日，中国领头的移动开发者服务平台——友盟、全球领先的中文网站统计分析平台——cnzz及国内领先的互联网数据服务平台——缔元信.网络数据在北京宣布合并，并启动了新公司“友盟+”成立仪式暨全域数据战略合作发布会。

2016-01-26 19:53:47

大数据
大数据时代留给数据分析师的羁绊
在大数据时代，数据分析师所扮演的角色不可能是一成不变的。随着大数据分析工具等大数据应用技术的出现，未来的数据分析师又将遇到怎样的挑战和机遇呢?

2016-01-26 10:33:23

大数据分析工具数据分析师
掰一掰GitHub上优秀的大数据项目
企业正在迅速用新技术武装自己以便从大数据项目中获益。写作本文的目的也就是为大家介绍一些解决大数据相关问题可能会用到的工具。本文中我们列出的这些GitHub项目应用颇为流行，而且这些工具和软件已经被用于解决实际中的大数据问题，希望本文能够对大家的大数据分析之路有所启发。

2016-01-26 10:02:18

GitHub大数据开源
一个SparkSQL作业的一生可能只是一集琅琊榜
小红是数据分析，她某天写了个SQL来统计一个分院系的加权均值分数汇总。她提交了这个查询到某个SQL On Hadoop平台执行，然后她放下工作，切到视频网页看一会《琅琊榜》……

2016-01-25 13:22:45

SparkSparkSQL数据分析
2分钟读懂Hadoop和Spark的异同
谈到大数据框架，现在最火的就是Hadoop和Spark，倒底现在业界都在使用哪种技术？二者间究竟有哪些异同？它们各自解决了哪些问题？让我们通过本文来了解。

2016-01-25 10:48:15

大数据框架HadoopSpark
处理不确定数据的方法研究
不确定性是客观存在的大量现象和事物的特征，其表现形式也具有多样性，如随机性、模糊性、粗糙性以及多重不确定性等。随着研究范围的扩大、研究内容的深入，对不确定现象与事物的研究及其数据处理方法也亟待突破和落地应用。

2016-01-22 11:05:07

不确定性数据
Cloudera和Spark的年度回顾
Cloudera 作为Apache Hadoop的最快速、最便捷、最安全的数据管理和分析平台，以及最新开源技术的提供者，于一个月前宣布增加了对Spark SQL和MLiB与Cloudera Enterprise 5.5 和 CDH 5.5集成的支持。

2016-01-15 15:55:56

ClouderaSparkHadoop
2016年大数据发展现状及发展趋势预测 原创
针对大数据来说，2016年将是令人振奋的一年。智能算法将接替现在由人类来完成的许多业务。我们将看到数据湖服务作为一种服务解决方案出现，帮助企业以最少的工作更多的使用数据。越来越多的行业将开始试用数据区块链技术（blockchain technology）以改变他们的行业。

2016-01-08 09:37:12

大数据现状趋势预测
如何从零构建实时的个性化推荐系统?
现在网上到处都有推荐。亚马逊等主流电子商务网站根据它们的页面属性以各种形式向用户推荐产品。Mint.com之类的财务规划网站为用户提供很多 建议，比如向用户推荐他们可能想要办理的信用卡，可以提供更好利率的银行。谷歌根据用户搜索历史记录的信息优化搜索结果，找到相关性更高的结果。

2016-01-07 13:23:35

构建实时推荐系统
大数据分析技术生态圈一览
人人都说大数据，但很多人对这个领域并非真正地了解。为了帮助你，我们决定制作这份厂商图标和目录。它并不是全面列出了这个领域的每家厂商，而是深入探讨大数据分析技术领域。我们希望这份资料新颖、实用。

2016-01-07 13:19:21

大数据分析生态圈
什么是机器学习：一次权威定义之旅
本篇文章中，我们可以了解到一个看似很简单但却很复杂的问题，那就是机器学习是什么?

2016-01-07 12:40:02

机器学习权威定义
你知道数据模型需要多少训练数据吗?
说大数据就定离不开机器学习，在使用机器学习技术的时候工程师除了要选择合适的算法之外还需要选择合适的样本数据。那么工程师到底应该选择哪些样本数据、选择多少样本数据才最合适呢?

2016-01-07 11:25:12

数据模型训练数据
热点推荐：你确定你真的懂用户画像?
随着大数据技术的深入研究与应用，企业的专注点日益聚焦于怎样利用大数据来为精准营销服务，进而深入挖掘潜在的商业价值。于是，“用户画像”的概念也就应运而生,从宏观层面总结，就是得到用户画像的数据架构。

2016-01-07 11:18:50

用户画像
因职业角色而异的十大数据科学技能
本文中的结果对数据专业人员感兴趣的领域和他们的招聘者及组织都有影响。数据专业人员可以使用结果来了解不同类型工作需要具备的技能种类。如果你有较强的统计能力，你可能会寻找一个有较强研究成分的工作。了解你的技能并找那些对应的工作。

2016-01-07 11:12:39

职业角色大数据技能
针对2016年大数据发展形势的预测 译文
大数据是人人都关注的话题，人人都是大数据的产生者。你想知道在2016年里大数据技术发展态势是怎样的吗？本文章中提到预计机器学习、实时数据即服务、算法市场以及Spark等等都将成为发展热点。

2016-01-07 10:07:53

2016大数据形势
使用Docker在本地搭建hadoop，spark集群
目前网上在docker上部署spark的介绍比较简单和没有相关启动使用的操作,本文重点在于docker相关的操作.

2016-01-07 09:36:20

Docker容器
Apache Eagle：eBay开源分布式实时Hadoop数据安全引擎
Apache Eagle提供一套高效分布式的流式策略引擎，具有高实时、可伸缩、易扩展、交互友好等特点，同时集成机器学习对历史模型训练建立用户画像以实现智能实时地保护Hadoop生态系统中大数据的安全。

2016-01-06 10:22:18

开源eBayHadoop
Qlik：2016年商业智能六大发展趋势 原创
商业智能在2016年的发展趋势到底如何?潘应麟认为，有六大要点：

2015-12-31 15:14:00

Qlik商业智能
知微[荐]著·新浪微博WOT推荐技术大会隆重召开 原创
知微[荐]著·新浪微博WOT推荐技术大会于骏马国际大酒店隆重召开，大会主要围绕微博推荐的技术建设、消息推送系统的实现、京东个性化推荐实战、微博中的用户模型这四部分展开。

2015-12-29 10:32:04

新浪微博广告推荐
知微“荐”著 · 新浪微博推荐背后的技术故事 原创
2015年12月26日13：30—17：15，由51CTO和新浪微博联合主办的《知微“荐”著·新浪微博WOT推荐技术大会》将于北京骏马国际酒店举行。 本次大会选取微博推荐技术中最重要的三个部分：推荐技术建设、消息推送机制以及用户模型，由新浪微博技术专家来分享给大家。此外，本次分享还邀请了京东搜索推荐部技术总监深入剖析个性化推荐系统在电商中的应用和成果，从商业化的角度来看待推荐技术。

2015-12-21 09:39:31

新浪微博推荐技术
Teradata天睿公司再次获Forrester评为企业级数据仓库领导者

2015-12-17 16:11:41

Teradata
友盟季报：小长假拍照美化应用受青睐 北京用户深夜爱购物 原创
今日，友盟于北京饭店正式对外发布2015年第二、三季度中国移动互联网趋势报告。51CTO记者受邀参加了这次的季报发布会，本文内容皆来自此次发布会。

2015-12-15 21:10:27

友盟报告移动互联网
友盟季报：网络资费制约接入 移动设备屏幕两极分化 原创
今日，友盟于北京饭店正式对外发布2015年第二、三季度中国移动互联网趋势报告。51CTO记者受邀参加了这次的季报发布会，本文内容皆来自此次发布会。

2015-12-15 20:19:58

友盟季报安卓
基因突变研究，释放PB级大数据的能量
随着研究人员努力整合来自健康档案、基因组和其他生理数据的临床试验数据，患者本身也可以作出贡献。“当我们专注于病人的日常行为，包括营养，运动，吸烟和饮酒等，没有比这更好的数据了”里奇说道。

2015-12-09 15:21:25

基因突变大数据能量
大数据工具比较：R语言和Spark 谁更胜一筹？
本文有两重目的，一是在性能方面快速对比下R语言和Spark，二是想向大家介绍下Spark的机器学习库。

2015-12-08 13:48:50

大数据工具R语言Spark
友盟吴磊：移动大数据平台的架构、实践与数据增值 原创
友盟从2010年成立至今，在大数据领域有独特技术和宝贵经验，51CTO对友盟数据平台负责人吴磊进行专访，就移动大数据平台的底层架构演进、实践经验与数据增值等内容进行了分享。

2015-12-08 10:00:18

大数据架构实践
UCloud重磅推出UHadoop大数据处理服务
UHadoop基于Hadoop开源框架，底层节点独占高性能SAS磁盘的特性有效提升了数据处理效率，快速扩展、监控和告警等功能则让集群管理更加便捷，从而实现轻松快速并经济地处理大量数据的需求。

2015-12-07 15:05:39

UCloudUHadoop大数据
用手机信号预测拥堵 大数据帮忙看路况能省时、省油
准确、及时预测路况一直是交通组织工作中的难题，尤其是早晚高峰，即便是官方发布的拥堵指数也会有一定的延时，对行在途中的司机来说，彼时的“通畅”可能已经成了此时的“拥堵”。记者从浙江省交通厅了解到，目前交通厅正在进行一项新的试点——通过阿里云的大数据，来分析预测未来1小时内的路况。

2015-12-04 13:24:47

手机大数据信号
Mob兰旭：用数据说话和做减法 原创
11月28-29日，为期两天的WOT2015大数据技术峰会在深圳完满落幕，来自全国各地的46位业界大咖在会上分享了大量技术干货，让与会者受益匪浅。Mob联合创始人兼CMO兰旭在会上做了主题为“大数据背景下的社交分享解决方案”的演讲，从看似简单的产品中深入挖掘用户需求，讲述为用户打造便捷体验背后的故事。

2015-12-03 16:39:09

数据产品mob
上一页 1 ··· 147148149150151 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服