51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术25年5月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

大数据

9076内容  
大数据话题包括大数据相关的最新资讯、前沿技术、使用技巧、应用案例等内容，涉及数据分析、数据可视化、商业智能、Hadoop、Spark、数据湖、数据仓库、等领域。
文章 博文帖子课程
共 9076 条
Java程序员使用的20几个大数据工具
今天我们就要说说大数据。根据维基百科，大数据是数据集的一个广义的术语，并且该数据集是如此庞大和复杂，以致于传统的数据处理应用程序无法胜任。

2016-01-28 14:39:04

大数据工具
果断收藏！六大主流大数据采集平台架构分析
大数据采集的挑战越来越突出。本文中我们将讨论几种流行的数据收集平台，它们大都提供高可靠和高扩展的数据收集。大多平台都抽象出了输入，输出和中间的缓冲的架构。利用分布式的网络连接，大多数平台都能实现一定程度的扩展性和高可靠性。

2016-01-28 10:26:59

大数据平台大数据采集架构分析
Spark Streaming 的玫瑰与刺
玫瑰篇主要是说Spark Streaming的优势点，刺篇就是描述Spark Streaming 的一些问题，做选型前关注这些问题可以有效的降低使用风险。说人话：其实就是讲Spark Streaming 的好处与坑。

2016-01-28 10:11:30

Spark StreaSpark大数据平台
大数据的六大人工智能变现方式
人工智能领域的一些理论和比较实用的方法，已经开始用于大数据分析方面，并显现出初步令人振奋的结果。至此大数据的价值变现潜能开始逐步被人工智能释放。同时，大数据技术的发展也将在为人工智能提供用武之地的同时，唤醒人工智能巨大的潜力，从而使这两个领域的技术和应用出现加速发展的趋势。

2016-01-27 13:54:21

大数据人工智能变现
已经证实提高机器学习模型准确率的八大方法
我从实践中学习了到这些方法。相对于理论，我一向更热衷于实践。这种学习方式也一直在激励我。本文将分享 8 个经过证实的方法，使用这些方法可以建立稳健的机器学习模型。希望我的知识可以帮助大家获得更高的职业成就。

2016-01-27 13:37:53

机器学习数据模型算法
友盟缔元信CNZZ合并为一 “友盟+”新领导层采访实录 原创
阿里巴巴收购友盟、缔元信.网络数据、CNZZ三家且合并为一家名为“友盟+”，今后会立足于独立的第三方全域大数据服务提供商，努力为企业客户和创业者提供全域大数据服务

2016-01-27 11:06:49

阿里友盟+采访
企业常见的三种数据部门架构优与劣
在一个企业中，可能数据部门在一个公司中组织架构中的位置，决定了部门的定位和一些做的事情，所以笔者认为，数据部门所处的组织架构对数据价值实现是一个很重要因素。

2016-01-27 10:25:31

数据分析数据架构数据价值
Gartner预警：千万别把数据湖与数据仓库混为一谈 译文
数据湖常常被厂商说成是应对大数据挑战的一种手段，它其实有助于你搞清楚针对你的数据提出的新问题，但前提是你得有相应技能。换句话说，别头脑发热将数据湖用于数据仓库

2016-01-27 09:49:19

Gartner数据湖数据仓库
打造全球最大的第三方全域大数据服务提供商 “友盟+”今起合并成立
2016年1月26日，中国领头的移动开发者服务平台——友盟、全球领先的中文网站统计分析平台——cnzz及国内领先的互联网数据服务平台——缔元信.网络数据在北京宣布合并，并启动了新公司“友盟+”成立仪式暨全域数据战略合作发布会。

2016-01-26 19:53:47

大数据
大数据时代留给数据分析师的羁绊
在大数据时代，数据分析师所扮演的角色不可能是一成不变的。随着大数据分析工具等大数据应用技术的出现，未来的数据分析师又将遇到怎样的挑战和机遇呢?

2016-01-26 10:33:23

大数据分析工具数据分析师
掰一掰GitHub上优秀的大数据项目
企业正在迅速用新技术武装自己以便从大数据项目中获益。写作本文的目的也就是为大家介绍一些解决大数据相关问题可能会用到的工具。本文中我们列出的这些GitHub项目应用颇为流行，而且这些工具和软件已经被用于解决实际中的大数据问题，希望本文能够对大家的大数据分析之路有所启发。

2016-01-26 10:02:18

GitHub大数据开源
一个SparkSQL作业的一生可能只是一集琅琊榜
小红是数据分析，她某天写了个SQL来统计一个分院系的加权均值分数汇总。她提交了这个查询到某个SQL On Hadoop平台执行，然后她放下工作，切到视频网页看一会《琅琊榜》……

2016-01-25 13:22:45

SparkSparkSQL数据分析
2分钟读懂Hadoop和Spark的异同
谈到大数据框架，现在最火的就是Hadoop和Spark，倒底现在业界都在使用哪种技术？二者间究竟有哪些异同？它们各自解决了哪些问题？让我们通过本文来了解。

2016-01-25 10:48:15

大数据框架HadoopSpark
处理不确定数据的方法研究
不确定性是客观存在的大量现象和事物的特征，其表现形式也具有多样性，如随机性、模糊性、粗糙性以及多重不确定性等。随着研究范围的扩大、研究内容的深入，对不确定现象与事物的研究及其数据处理方法也亟待突破和落地应用。

2016-01-22 11:05:07

不确定性数据
Cloudera和Spark的年度回顾
Cloudera 作为Apache Hadoop的最快速、最便捷、最安全的数据管理和分析平台，以及最新开源技术的提供者，于一个月前宣布增加了对Spark SQL和MLiB与Cloudera Enterprise 5.5 和 CDH 5.5集成的支持。

2016-01-15 15:55:56

ClouderaSparkHadoop
2016年大数据发展现状及发展趋势预测 原创
针对大数据来说，2016年将是令人振奋的一年。智能算法将接替现在由人类来完成的许多业务。我们将看到数据湖服务作为一种服务解决方案出现，帮助企业以最少的工作更多的使用数据。越来越多的行业将开始试用数据区块链技术（blockchain technology）以改变他们的行业。

2016-01-08 09:37:12

大数据现状趋势预测
如何从零构建实时的个性化推荐系统?
现在网上到处都有推荐。亚马逊等主流电子商务网站根据它们的页面属性以各种形式向用户推荐产品。Mint.com之类的财务规划网站为用户提供很多 建议，比如向用户推荐他们可能想要办理的信用卡，可以提供更好利率的银行。谷歌根据用户搜索历史记录的信息优化搜索结果，找到相关性更高的结果。

2016-01-07 13:23:35

构建实时推荐系统
大数据分析技术生态圈一览
人人都说大数据，但很多人对这个领域并非真正地了解。为了帮助你，我们决定制作这份厂商图标和目录。它并不是全面列出了这个领域的每家厂商，而是深入探讨大数据分析技术领域。我们希望这份资料新颖、实用。

2016-01-07 13:19:21

大数据分析生态圈
什么是机器学习：一次权威定义之旅
本篇文章中，我们可以了解到一个看似很简单但却很复杂的问题，那就是机器学习是什么?

2016-01-07 12:40:02

机器学习权威定义
你知道数据模型需要多少训练数据吗?
说大数据就定离不开机器学习，在使用机器学习技术的时候工程师除了要选择合适的算法之外还需要选择合适的样本数据。那么工程师到底应该选择哪些样本数据、选择多少样本数据才最合适呢?

2016-01-07 11:25:12

数据模型训练数据
热点推荐：你确定你真的懂用户画像?
随着大数据技术的深入研究与应用，企业的专注点日益聚焦于怎样利用大数据来为精准营销服务，进而深入挖掘潜在的商业价值。于是，“用户画像”的概念也就应运而生,从宏观层面总结，就是得到用户画像的数据架构。

2016-01-07 11:18:50

用户画像
因职业角色而异的十大数据科学技能
本文中的结果对数据专业人员感兴趣的领域和他们的招聘者及组织都有影响。数据专业人员可以使用结果来了解不同类型工作需要具备的技能种类。如果你有较强的统计能力，你可能会寻找一个有较强研究成分的工作。了解你的技能并找那些对应的工作。

2016-01-07 11:12:39

职业角色大数据技能
针对2016年大数据发展形势的预测 译文
大数据是人人都关注的话题，人人都是大数据的产生者。你想知道在2016年里大数据技术发展态势是怎样的吗？本文章中提到预计机器学习、实时数据即服务、算法市场以及Spark等等都将成为发展热点。

2016-01-07 10:07:53

2016大数据形势
使用Docker在本地搭建hadoop，spark集群
目前网上在docker上部署spark的介绍比较简单和没有相关启动使用的操作,本文重点在于docker相关的操作.

2016-01-07 09:36:20

Docker容器
Apache Eagle：eBay开源分布式实时Hadoop数据安全引擎
Apache Eagle提供一套高效分布式的流式策略引擎，具有高实时、可伸缩、易扩展、交互友好等特点，同时集成机器学习对历史模型训练建立用户画像以实现智能实时地保护Hadoop生态系统中大数据的安全。

2016-01-06 10:22:18

开源eBayHadoop
Qlik：2016年商业智能六大发展趋势 原创
商业智能在2016年的发展趋势到底如何?潘应麟认为，有六大要点：

2015-12-31 15:14:00

Qlik商业智能
知微[荐]著·新浪微博WOT推荐技术大会隆重召开 原创
知微[荐]著·新浪微博WOT推荐技术大会于骏马国际大酒店隆重召开，大会主要围绕微博推荐的技术建设、消息推送系统的实现、京东个性化推荐实战、微博中的用户模型这四部分展开。

2015-12-29 10:32:04

新浪微博广告推荐
知微“荐”著 · 新浪微博推荐背后的技术故事 原创
2015年12月26日13：30—17：15，由51CTO和新浪微博联合主办的《知微“荐”著·新浪微博WOT推荐技术大会》将于北京骏马国际酒店举行。 本次大会选取微博推荐技术中最重要的三个部分：推荐技术建设、消息推送机制以及用户模型，由新浪微博技术专家来分享给大家。此外，本次分享还邀请了京东搜索推荐部技术总监深入剖析个性化推荐系统在电商中的应用和成果，从商业化的角度来看待推荐技术。

2015-12-21 09:39:31

新浪微博推荐技术
Teradata天睿公司再次获Forrester评为企业级数据仓库领导者

2015-12-17 16:11:41

Teradata
友盟季报：小长假拍照美化应用受青睐 北京用户深夜爱购物 原创
今日，友盟于北京饭店正式对外发布2015年第二、三季度中国移动互联网趋势报告。51CTO记者受邀参加了这次的季报发布会，本文内容皆来自此次发布会。

2015-12-15 21:10:27

友盟报告移动互联网
友盟季报：网络资费制约接入 移动设备屏幕两极分化 原创
今日，友盟于北京饭店正式对外发布2015年第二、三季度中国移动互联网趋势报告。51CTO记者受邀参加了这次的季报发布会，本文内容皆来自此次发布会。

2015-12-15 20:19:58

友盟季报安卓
基因突变研究，释放PB级大数据的能量
随着研究人员努力整合来自健康档案、基因组和其他生理数据的临床试验数据，患者本身也可以作出贡献。“当我们专注于病人的日常行为，包括营养，运动，吸烟和饮酒等，没有比这更好的数据了”里奇说道。

2015-12-09 15:21:25

基因突变大数据能量
大数据工具比较：R语言和Spark 谁更胜一筹？
本文有两重目的，一是在性能方面快速对比下R语言和Spark，二是想向大家介绍下Spark的机器学习库。

2015-12-08 13:48:50

大数据工具R语言Spark
友盟吴磊：移动大数据平台的架构、实践与数据增值 原创
友盟从2010年成立至今，在大数据领域有独特技术和宝贵经验，51CTO对友盟数据平台负责人吴磊进行专访，就移动大数据平台的底层架构演进、实践经验与数据增值等内容进行了分享。

2015-12-08 10:00:18

大数据架构实践
UCloud重磅推出UHadoop大数据处理服务
UHadoop基于Hadoop开源框架，底层节点独占高性能SAS磁盘的特性有效提升了数据处理效率，快速扩展、监控和告警等功能则让集群管理更加便捷，从而实现轻松快速并经济地处理大量数据的需求。

2015-12-07 15:05:39

UCloudUHadoop大数据
用手机信号预测拥堵 大数据帮忙看路况能省时、省油
准确、及时预测路况一直是交通组织工作中的难题，尤其是早晚高峰，即便是官方发布的拥堵指数也会有一定的延时，对行在途中的司机来说，彼时的“通畅”可能已经成了此时的“拥堵”。记者从浙江省交通厅了解到，目前交通厅正在进行一项新的试点——通过阿里云的大数据，来分析预测未来1小时内的路况。

2015-12-04 13:24:47

手机大数据信号
Mob兰旭：用数据说话和做减法 原创
11月28-29日，为期两天的WOT2015大数据技术峰会在深圳完满落幕，来自全国各地的46位业界大咖在会上分享了大量技术干货，让与会者受益匪浅。Mob联合创始人兼CMO兰旭在会上做了主题为“大数据背景下的社交分享解决方案”的演讲，从看似简单的产品中深入挖掘用户需求，讲述为用户打造便捷体验背后的故事。

2015-12-03 16:39:09

数据产品mob
低调行事却估值200亿美金，揭秘硅谷神秘大数据公司Palantir
如果你不曾听说过硅谷大数据公司Palantir Technologies，那么一点也不足为奇。

2015-12-03 16:07:57

大数据估值硅谷
扎克伯格捐出99%股票后，会否丧失对公司的控制权？
Facebook真正让人叫绝的措施是在双层股权结构的设计还加入了一个表决权代理协议

2015-12-03 14:53:17

捐款扎克伯格股票
被誉为高新科技产业聚集地的以色列，为何没有一家科技巨头？
以色列的企业家一般在经过3～5年后，就会以数千万至数亿的价格将企业卖掉；他们并不具有建立一个数十亿美元的企业的能力或是精力

2015-12-03 14:48:03

科技以色列巨头
怎样才能持续招到最牛的数据人才？
这是一篇来自国外的文章，原文叫How to Consistently Hire Remarkable Data Scientists 作者是Jeremy Stanley，Sailthru公司的主力数据科学家和EVP工程师，他负责搭建公司智能的个性化营销平台。他的数据科学团队致力于预测、推荐及优化算法。下面是正文。

2015-12-03 10:14:04

数据人才
为什么进赌场总是输？大数据来告诉你
本人在美国读书多年，学的是金融数学，我不是一个赌徒。但是家中有人（我的舅佬）在过年的时候输钱躲债，全家人才知道他赌博的事实。他在澳门豪赌，本来拿来回周转资金链的钱全部吞进，结果落得这个下场。

2015-12-03 10:09:31

赌场大数据
“3+1”网站分析法，让你秒懂网站的构建模式
我们没有办法确定用户进入网站要具体选择哪个业务，要去网站的哪里，所以我们只能将网站所有的服务集合在一个页面供用户自己去挑选。它像地图一样清晰的展示 了网站在哪里有什么怎么去，它也像门面一样担负着网站的形象工程。它的使命就是：清晰的展示网站所有的服务，让用户更快速的找到想要的服务。

2015-12-03 09:59:00

网站构建分析
13招神技 让你在数据科学和数据分析工作中脱颖而出
我有幸在很早参与了一个大数据科学项目，我非常喜欢其中的工作，甚至我意识到我的努力可以增加一些公司的价值。

2015-12-03 09:46:29

神技技能职场
挖掘更多数据 人工智能反恐进行时
作为士兵和计算机科学家，保罗·沙克瑞恩跟恐怖主义打了14年仗。不久前，巴黎暴恐袭击发生后，联合国安理会一致通过打击“伊拉克和大叙利亚伊斯兰国” （简称“IS”）决议。

2015-12-02 11:06:47

反恐数据算法
移动互联网应用数据分析基础体系
在2012年及2013年诸多大型互联网公司其移动端的流量已经超越PC端的流量，很多大型互联网企业PC业务用户往移动端迁移，呈现出PC业务增长放缓，移动业务增长迅速的态势。

2015-12-02 10:51:36

移动互联网数据分析
大数据应用于人力 预测性劳动力分析真的有用么？
最近，人力资源专家、人力资源技术会议之父—Bill Kutik写了一篇文章《预测分析炒作》。在这篇文章中，他引用星座研究分析师Holger Mueller的说辞“这归结于当应用于大量有着不同数据视野的顾客时，这些模型是否真的有用。

2015-12-02 10:15:09

大数据人力劳动力
大数据与熵：临界分析
本文通过研究数据对象的熵，对大数据方法和传统抽样方法的临界关系做了分析，得到一个理论公式：S = λ*2 ^H(X)，并给出了详细解释。

2015-12-02 09:58:01

大数据熵临界
WOT2015卢亿雷：新媒体时代下的广告营销 原创
自互联网业务诞生以来，对广告业务的探索就没有停止过。随着大数据技术的进一步落地，广告业务发展也迎来了新技术。针对基于大数据的广告业务的相关问题，51CTO记者在【WOT2015"互联网+"时代大数据技术峰会】现场采访了大数据资深专家，AdMaster技术副总裁卢亿雷。

2015-11-29 22:32:37

wot新媒体广告
WOT2015谢佳标：基于R语言的大数据处理及建模技术 原创
在深圳的WOT2015“互联网+”时代大数据技术峰会现场，51CTO记者采访了WOT特邀讲师、乐逗游戏高级数据分析师谢佳标，从R语言和大数据建模等方面对大数据做深刻解读。

2015-11-29 18:19:30

R语言大数据建模
上一页 1 ··· 147148149150151 ··· 182
点赞

51CTO技术栈公众号

业务
速览
在线客服