鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 25年5月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

超越 Hadoop，Luigi 打通云端大数据管道

近日创业公司Mortar就将Spotify开发的开源大数据工具Luigi搬上云端，在亚马逊云上提供复杂的，涉及大量工具和数据库的大数据流水线处理服务，不论是否使用Hadoop，用户都可以用Luigi管理复杂的大数据工作流。

2014-10-15 11:07:43

Postgres 的全文搜索已经足够好了

搜索是项非常重要的功能，所以像elasticsearch和SOLR这样的基于lucene的工具变得很流行。它们都很棒。但使用这些大规模“杀伤性”的搜索武器前，你可能需要来点轻量级的，但又足够好的搜索工具。

2014-10-14 09:49:47

Postgres 数据库

SQLite 3.8.7大量细微优化，性能提升50%以上原创

SQLite 3.8.7alpha 发布了，该版本包含几百项微小的优化，每个微优化性能至少会提升0.05%，使得整个 SQLite 数据库的性能提升超过 50%，查询运行速度也快了5倍。

2014-10-08 10:37:41

不同场景分析：MySQL 升级的最佳实践

为什么MySQL升级是必须的? 原因有很多,比如：为了使用新增的特性,基于性能方面的考量, 修复的bug. 但是在没有充分的测试以前就应用到你的应用中是非常危险的, 因为升级可以能会让你的应用不能正常运作- 也可能引起性能的问题. 此外, 我建议你关注MySQL的发布信息和Percona Server - 看看最近的版本有什么变化。

2014-09-29 09:48:54

MySQL MySQL实践

使用SQL Server In-Memory存储ASP.NET的会话状态

从以前的 “classic” ASP 到目前的 ASP.NET 4.5 Web Forms，很多开发者依赖ASP.NET 会话状态作为重要的临时保存每个用户的数据的主要手段。它的特征是在用户访问web应用程序的过程中，允许开发者存储和读取用户的数据。

2014-09-28 09:53:42

ASP.NET SQL Server

临时表VS表变量：因地制宜，合理使用

借用火影忍者中宇智波. 鼬的一句名言：”任何术都是有缺陷的” 同样,在数据库的世界里没有哪项技术是完美无缺的.根据实际的场景,情形,选择合理的实现方式才是我们的初衷。

2014-09-25 09:43:29

临时表表变量 SQL

PostgreSQL祭起自己的NoSQL法宝译文

以MongoDB以及CouchDB为代表的NoSQL数据库彼此之间一直斗得热火朝天、不亦乐乎，然而如今又有一款关系型数据库通过转型加入到NoSQL领域的竞争中来。

2014-09-16 10:24:49

PostgreSQL NoSQL

通过Redis实现RPC远程方法调用

我发现经常研究并且为之兴奋的一件事就是对系统进行扩展。现在这对不同的人有着不同的意思。作为移植Monolithic应用到Microservices架构方法中的一部分，如何处理Microservices架构是我研究RPC的原因。

2014-09-02 10:43:45

商品信息数据分析和展现系统的设计与开发

商品价格和人们生活息息相关，比如农产品价格波动不仅会对农民收入和农民生产积极性产生直接影响，更关乎百姓的日常生活和切身利益。经常看新闻看到农民辛苦了一个季度的农作物全都烂在地里，因为价格太低廉，或者没有销路。虽然说物价波动是一种正常的经济现象，但是在一定程度上物价稳，人心才稳，社会才稳。为保持经济平稳健康发展、保障群众生活，稳定物价，信息公开显得尤为重要。价格监测和预测是维持物价稳定的一个重要环节。而对于商品价格、产量、以及销路、销量等数据公开，建立产品价格分析、监测、预测平台可以为相关政府管理

2014-09-01 09:09:05

商品信息数据分析

SQL Server数据库设计规范

数据库设计是指对一个给定的应用环境，构造最优的数据库模式，建立数据库及其他应用系统，使之能有效地存储数据，满足各种用户的需求。数据库设计过程中命名规范很是重要，命名规范合理的设计能够省去开发人员很多时间去区别数据库实体。

2014-08-29 10:24:05

大数据与商业地理分析：中国视角

从全球范围来看，采用商业地理数据进行商业选址及消费者地理细分在发达经济体已经非常普及。为更精准地服务不断升级的中国消费者，宜家家居、麦当劳、星巴克等专门成立了商业地理分析团队，来指导其在中国的店铺选址。麦肯锡的“解读中国”商业地理分析团队亦感受到来自客户方越来越强烈的需求。我们以下图来说明架构在大数据之上的商业地理分析。

2014-08-29 09:50:35

大数据商业地理

SQL Server非聚集索引能给我们带来什么？

最近在做的一个项目，页面访问的时候很慢（大概几秒钟的样子），然后用日志记录的方式，来排查这个问题，最后发现是Entity Framework初始化的一个坑（大概要花 6-7 秒），详见：《来，给Entity Framework热热身》，但是除了这个问题，还发现当一些用户数据量很大的时候，访问也是有些慢，这个就不是 Entity Framework 的问题了（因为初始化已完成）。下面是笔者解决问题的过程。

2014-08-28 10:06:57

SQL Server执行计划教会我如何创建索引？

以前有 DBA 在身边的时候，从来不曾考虑过数据库性能的问题，但是，当一个应用程序从头到脚都由自己完成，而且数据库面对的是接近百万的数据，看着一个页面加载速度像乌龟一样，自己心里真是有种挫败感。代码的优化问题，这是属于程序员的职责范围之内，对于我来说，这一方面比较好探查些，因为都是自己熟悉的，用EF或SQL Server Profiler 跟踪一下程序代码产生的SQL，如果有问题，直接优化程序代码就可以了，如果SQL没问题，那就得优化数据库了，对于我来说，这是一个无人区。

2014-08-28 09:54:35

Fabric结合GTID实现Mysql复制高可用

fabric为启用复制的3个mysql实例提供高可用，应用使用fabric-aware的连接器路由事务和SQL语句到合适的服务器，透明的进行读和写操作……

2014-08-28 09:43:38

Fabric GTID Mysql

中小企业大数据应用之道:思维在于借力

查询大数据应用案例是，发现基本都是大公司，如何利用大数据取得了很好的营销效果，或者用大数据提升了品牌形象，或者用大数据提前预测了产品趋势，占得市场先机。但这些高大上的应用，其实对于大企业，有很好的借鉴作用，而对于更多的中小企业，则缺乏借鉴，所以会感觉大数据还是浮在天上的云，没法落地。

2014-08-28 09:38:07

大数据应用

微软Aure SQL服务再降价提高SLA服务标准

微软宣布降低其Azure 云服务SQL数据的价格，对于使用标准和高级套餐的用户来说降幅达到了50%。此外，在标准套餐中添加了一个新S0分级。

2014-08-27 17:10:02

神经系统和大数据，新降维算法让大脑变得简单

科学家现在已经可以检测和记录大脑中数百个神经元的活性，并不断进行技术开发承诺成倍增加这个数目。然而，简单地记录神经元活动并不能让科学家自动理解大脑是如何工作的。

2014-08-27 10:13:25

Hadoop的梦想与现实

可以说，Hadoop的出现是计算技术发展进程中一个重要的里程碑，它使实用的大规模分布式计算和存储成为可能。因此，有专家评论，Hadoop是到目前为止最为成功的通用分布式处理框架，也是这些年来影响最为深远的系统性开源项目之一。

2014-08-27 09:51:13

Oracle 12c新特性对于业务上的一些影响总结

Oracle 12c的发布，将给广大DBA的工作带来新的变化。本文为您总结Oracle 12c新特性对于业务上的一些影响。

2014-08-26 10:03:45

大数据弹性应用开发原则：抽象，事关高效和简洁

避免大数据应用在生产环境中掉链子的最佳办法就是在开发阶段就开发弹性应用，例如：鲁棒、经过测试、可改变、可审计、高安全、可监控。

2014-08-26 09:34:33

大数据弹性应用

大数据Hadoop技术在银行的七个应用实例

如今，Hadoop几乎存在于各个方面，其通过利用大数据来分析信息和增加竞争力。许多金融机构和公司已经开始使用Hadoop成功地解决问题，即便他们本没有计划这样做。因为如果他们不这样做，就会面临市场份额损失的巨大风险。以下是一些特别有趣和重要的大数据和Hadoop用例。

2014-08-25 10:24:02

专访梁宇明：Hulu的Spark On YARN之路原创

Hulu，因为尚未进入中国，知道它的人远不如知道YouTube和优酷、土豆。而在美国，Hulu已经将Google Video挤出局成为全美排名第10的视频网站。今天，来自Hulu，负责大数据团队基础架构开发的梁宇明老师，将为我们分享Hulu的Spark On YARN之路。

2014-08-25 09:03:44

Hulu Spark On Y

大数据架构-使用HBase和Solr配置存储与索引

HBase可以通过协处理器Coprocessor的方式向Solr发出请求，Solr对于接收到的数据可以做相关的同步：增、删、改索引的操作，这样就可以同时使用HBase存储量大和Solr检索性能高的优点了，更何况HBase和Solr都可以集群。这对海量数据存储、检索提供了一种方式，将存储与索引放在不同的机器上，是大数据架构的必须品。

2014-08-22 11:04:39

大数据架构

浅谈机器学习中的线性回归

线性回归属于监督学习，因此方法和监督学习应该是一样的，先给定一个训练集，根据这个训练集学习出一个线性函数，然后测试这个函数训练的好不好（即此函数是否足够拟合训练集数据），挑选出最好的函数（cost function最小）即可。

2014-08-22 10:06:46

虚拟机备份克隆导致SQL Server出现IO错误

晚上收到数据库一封告警邮件SQL Server Alert System: 'Severity 016' occurred on \\xxxxx。本文将介绍错误修正过程。

2014-08-21 10:05:59

试论出版社如何玩转大数据

最近有个段子在微信上流行，说世界上最早运用大数据的是中国的“战神”——孙膑，他曾用敌营做灶的数量来判断对方军队的数量，从而指导打仗。只不过在当时这样的数据少之又少，而能够真正利用这些数据的人便会被人尊为智者。如今大数据汹涌来袭，正在改变着世界，出版业自然不能例外，部分出版单位已开始涉足大数据分析。但对于大多数出版单位而言，大数据依然很神秘。

2014-08-21 09:28:04

生物医学大数据：现状与展望

大数据(big data)是指由于容量太大和过于复杂，无法在一定时间内用常规软件对其内容进行抓取、管理、存储、检索、共享、传输和分析的数据集。

2014-08-21 09:16:45

5个大数据实践项目

由于大多数被过度炒作的技术趋势已经褪去了他们最初的光环，而且这种退潮的速度很快，因而一些怀疑论者对于大数据技术也持有一种保守的看法。然而，大数据目前已被看成是能够改变世界的最新技术趋势，且实际上，那些怀疑论者对于大数据的质疑程度远远低于对云计算和社交的质疑。

2014-08-20 09:40:56

大数据实践项目

业界观点：虚拟数据室交易的未来

Torgny Gunnarsson：现如今，云计算和在线数据共享对于那些热衷于与家人和朋友分享照片和音乐的消费者而言已经是再平常不过的了，但其实这一趋势在商业领域也相当的繁荣。企业机构和相关的专业人员都在寻找高效，安全和易于使用的信息共享方法，这使得市场对于虚拟数据室的需求(VDRs)在过去的10年已经大大飙升。

2014-08-18 09:19:51

虚拟数据室

mongodb的导入导出方法

MongoDB提供了mongoexport工具，可以把一个collection导出成json格式或csv格式的文件。可以指定导出哪些数据项，也可以根据给定的条件导出数据。工具帮助信息如下：

2014-08-15 13:44:40

快数据：大数据发展的下一个起点

开源工具正帮助企业大量处理数据流，而为了引入复杂查询与事务型处理能力，VoltDB公司的John Hugg建议采用内存内NewSQL数据存储模式。

2014-08-15 10:34:42

快数据大数据

SSIS通过环境变量配置数据源连接参数

希望在包执行的时候可以随意选择参数,这时候我们可以用环境变量 . 另外所有包都可以用环境变量,有大量包的时候就比较方便.

2014-08-15 09:55:09

大数据项目：购买还是自开发？

对于大数据相关的技术，CIO应该从外部引入还是在公司内部自行开发？这个问题没有简单明了的答案。但是，有一个原则是必须遵循的，即从增强公司竞争力的角度来进行选择。在之前的文章里，专家们认为，在做出大数据技术买入抑或自建的决策前，CIO们要比以往任何时候都更加重视对业务端的影响。而在本文中，我们将具体讨论买入或自建的决策依据。

2014-08-15 09:09:32

SQL Server查询使用键查找时锁申请及释放顺序

最近看了高兄的一篇文章，SQL Server高频,高并发访问中的键查找死锁解析，很有收获，里面讲到了键查找引起的死锁问题。

2014-08-14 10:38:30

SQL Server 查询

腾讯互娱是这样利用游戏大数据的

迄今为止，大数据已经成为了热门话题，但腾讯公司在公开场合很少提大数据，不是因为数据太少，而是积累的太多，所以腾讯如何发挥这些数据的价值一直是一个重大的议题。

2014-08-14 10:05:01

游戏大数据

再谈大数据行业里的两大误区

之前发了一篇文章《如何落地才是硬道理大数据行业里的两大误区》，很多朋友评价还不错，受此激励，结合最近目睹、经历的项目，想多写一些。经过笔者总结，发现大数据的误区还真是不少，尤其是国内，很多人以讹传讹，造成了很多基本概念的偏差。接上一篇文章，再来谈谈大数据中的一部分误区，供大家拍砖。

2014-08-14 10:02:34

大数据行业

机器学习机制正在崛起译文

一家年轻的大数据分析初创企业Adatao告诉我们，随着系统智能化水平的不断提高再提高，我们正身处计算新阶段的起跑线上。

2014-08-14 08:55:11

Google打造新大数据系统Mesa

Google最近发表了一篇有关大数据系统的论文，讨论了一个名为Mesa的数据仓库系统，它能处理近实时数据，即使在整个数据中心断线后还能正常工作。Google工程师将在下月于中国举行的超大型数据库会议上，提交一篇有关Mesa的论文。

2014-08-13 09:39:05

七大最具影响力的大数据应用案例

在当前的互联网领域，大数据的应用已经十分广泛，尤其以企业为主，企业成为大数据应用的主体。大数据真能改变企业的运作方式吗?答案毋庸置疑是肯定的。随着企业开始利用大数据，我们每天都会看到大数据新的奇妙的应用，帮助人们真正从中获益。大数据的应用已广泛深入我们生活的方方面面，涵盖医疗、交通、金融、教育、体育、零售等各行各业。

2014-08-13 09:17:41

大数据应用案例

当统计学遇上大数据——P值消亡

有一天，我走进统计学的神殿，将所有谎言都装进原假设的盒子里，“P值为零”，一个声音传来，“但你已经不能再拒绝，因为，P值已经死了”从此，这个世界上充斥着谎言。

2014-08-12 15:03:57

首席数据官CDO的五大要务

调查显示财富500强中已经有四分之一的企业聘用了首席数据官(CDO)，但大多数企业并不了解这个全新岗位的目标和职责。

2014-08-12 14:49:00

首席数据官

大数据、小模式、深影响

Luciano　Floridi，我今天想跟大家分享的是大数据以及大数据所延伸出来的商业价值。

2014-08-11 09:18:26

移动医疗大数据的几个伪命题：大数据的陷阱

在医疗大数据项目中，很多情况下，由于无法验证有效性、敏感性和特异性，所以即使得出了100个结果趋势，却没有几个是有临床参考意义的，就是说即使看起来是那么一回事，又怎么样，能反过来指导临床吗？

2014-08-08 09:48:09

移动医疗大数据

企业对大数据与分析的胃口日益增大

我们采访的大多数管理者都认为公司应该更多地进行数据分析。更重要的是，越来越多的公司将数据和分析视为具有战略价值的资产。

2014-08-08 09:41:15

老大哥正注视着你：在线追踪新技术

几个最近开发的并且鲜为人知的互联网追踪技术正在变得越来越普遍，专家们说。并且，不是像典型的跟踪记录用户在许多网站上的网络浏览的“cookies”那样，这些新的方法并不容易被发现、避免或删除。

2014-08-07 09:18:34

分析3.0和企业3.0：接下来会越来越有趣

如今“三部曲”非常流行，小说界有《魔戒》、《尼罗河》、《三体》等名作，电影界有《星球大战》、《无间道》、《黑客帝国》等脍炙人口的作品，最近IT业界也开始流行三部曲了！这就是最近圈内谈论颇多的分析3.0（Analytics 3.0）和企业3.0（Enterprise 3.0），这两个新的术语被用来描述当今的超级数字化环境。

2014-08-06 14:09:43

MariaDB: 选择性二进制日志事件

默认情况下使用MySQL标准复制功能时，所有事件都记录在二进制日志中，并复制到所有从机(可以过滤掉一些模式)。但使用此特性，可以在从机上跳过一些事件的复制，即使这些事件是被写入到二进制日志中的。

2014-08-06 10:10:52

MariaDB 二进制日志

探寻微博背后的大数据原理：推荐算法

在介绍微博推荐算法之前，我们先聊一聊推荐系统和推荐算法。有这样一些问题：推荐系统适用哪些场景？用来解决什么问题、具有怎样的价值？效果如何衡量？

2014-08-06 09:08:03

大数据与数据挖掘的辩证关系

大数据时代，虽然数据安全被一而再的强调，但是人们显然更乐于大数据和数据发掘的探索。无论是商业、医学、政治等领域，从巨量数据中提取出有用的信息，创造有用的价值都是各个领域在不断努力的方向。

2014-08-06 09:00:55

从大数据到快数据的技术转身

在开始使用VoltDB的时候，我们很难想象今天会有这么多的快速数据源。从跟我交流过的每一个行业和客户来看，在短短的4年时间里，无论是在细分应用领域还是在全行业，新数据源数量激增已是不争的事实。很多研究都证明了物联网以及移动互联网产生了大量的数据，数据爆炸时代的额来临。比如EMC的数字宇宙研究、Mary Meeker的年度互联网趋势报告、Pew研究所的关于移动互联网的趋势和互联网近25年的影响的研究。

2014-08-05 09:37:07

上一页 1 ··· 139 140 141 142 143 ··· 334 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营