借鉴之人人网使用的开源软件列表

数据库
这是人人网使用的一些开源软件的列表,拿出来晒一晒。还有些小东西就不列出来了,最后要说的一点就是,对这些开源软件或者系统,我们都非常的了解,或者说知根知底,从API到内部实现原理,甚至到一些源码的细节。

MySQL

关系型数据库存储系统,我们的DBA团队很强大,每人管理上百台MySQL服务器,其他就不多说了,网上资料太多了

Tokyo Cabinet

一个key-value的存储引擎,日本人开发,国内很多公司也开始使用,我们内部很多地方也用它来代替 MySQL来做存储,比如我们的搜索结果页的用户资料,就是用它来做一层MySQL外的冗余存储,目的是加快搜索结果页的显示。在key-value并需要持久存储的场景下,用它比MySQL更有效,Cabinet本身只是一个存储引擎,没有网络处理能力,你可以用它作为自己的某个系统的下层存储引擎,更好的是搭配Tokyo Tyrant使用。

Tokyo Tyrant

一个支持Memcached传输协议的网络接口,由Tokyo Cabinet的作者开发,目的是为Tokyo Cabinet提供网络接入能力,即Tokyo Tyrant处理网络连接,协议解析,然后调用Tokyo Cabinet的API来完成持久化存储。

ICE

一个跨语言的网络通讯框架,框架本身提供了强大的通讯能力,管理工具,负载均衡方案,其跨语言能力也是一个很大的亮点,基于这个框架之上,我们选用合适的语言来提供合适的服务,比如我们使用C++来开发Cache服务,使用Java来开发一些逻辑服务。框架本身可以很重,也可以很轻,具体要看你怎么用:)

Memcached

一个纯内存的key-value的cache系统,高效、稳定,使用广泛,如果你连它都没听说过就太out 啦,memcached本身不具备分布式能力,需要依靠Client来实现分布,这里强调一点的是,你应该选择一致性Hash来做key的分布。各种语言的client都有,我们使用spymemcached作为java的Client,spymemcached是一个异步的NIO的memcached client,对网络IO的处理非常的精巧,也更加高效,同时因为提供异步操作方式,可以让你对Memcached的操作有更好的控制能力,Memcached到1.4.0版本之后,开始支持binary protocol,spymemcached对其也支持的比较好,使用binary protocol可以提高对协议的解析效率和网络IO的读写效率。

上面说到我们使用ICE自己开发了Cache服务,为什么我们还要用 Memcached呢?主要在对Cache的操作粒度不一样,Memcached对Cache对象以binary byte作为一个整体来操作,需要频繁的序列化和反序列化,我们使用ICE提供的Cache服务,可以以Cache对象的一个或者多个字段来操作,比如一个用户对象,我们可以只更新它的姓名,而Memcached

Nginx

高效、稳定的Web Server,我们利用其代理能力,做跨IDC的请求代理,同时也将其和我们的Resin(Java Web 容器)搭配,放在Resin的前面来解决Resin的对网络连接处理能力弱的问题,在一些小地方也用它来做7层的负载均衡

Resin

一个Java Web Server,比Tomcat更高效,是我们主要的Java Web容器

Squid

代理服务器,我们用他来做图片文件的反向代理缓存

LVS

能提供4层的负载均衡,高效、高可用,高并发。我们用他替代了很多硬件的负载均衡设备

Struts

Java web框架,不过这个已经是历史了,我们开发了一套自己的Web框架替代了它,未来我们也会把我们的内部的这套Web框架开源出来

Lucence

基于Java的搜索引擎框架,用它我们构建了一个搜索集群来提供搜人的服务

Netty

一个Java的网络框架,和apache的mina类似,但比mina更高效,我们用来做一些小的服务

Ganglia

一个监控系统,帮组我们了解我们每台Server的资源利用情况

还有些小东西就不列出来了,最后要说的一点就是,对这些开源软件或者系统,我们都非常的了解,或者说知根知底,从API到内部实现原理,甚至到一些源码的细节。

原文链接:http://blog.csdn.net/expleeve/archive/2011/06/02/6460725.aspx

【编辑推荐】

 

  1. 淘宝海量数据库之克服随机IO难题
  2. 数据库如何抵抗随机IO的问题、方法与现实
  3. 一步一步设计你的数据库之不可轻视的需求分析
  4. 养成一个SQL好习惯带来一笔大财富
  5. MySQL中创建及优化索引组织结构的思路
责任编辑:艾婧 来源: expleeve的博客
相关推荐

2011-12-23 14:05:08

Ruby on RaiSDK人人网

2011-12-08 14:09:07

2009-05-18 09:24:00

IMSIP多媒体FMC

2024-10-16 08:31:29

2011-12-13 14:15:30

2011-12-08 16:18:40

2022-06-19 14:10:48

开源软件企业Linux 基金会

2013-09-03 10:10:00

人人网移动开发架构

2013-09-03 10:22:02

人人网移动开发架构

2011-12-13 13:54:42

2013-01-05 14:51:34

JavaScriptjQuery面试

2011-07-04 14:24:50

2011-10-31 17:29:27

人人网客户端照片

2022-03-05 23:08:14

开源软件开发技术

2011-12-12 16:05:59

开放平台

2011-12-08 16:39:58

京东商城

2018-06-15 22:41:06

开源软件React软件开发

2011-09-27 07:26:33

程序员

2010-02-25 17:23:09

Fedora IT

2010-04-02 12:51:14

Oracle安装
点赞
收藏

51CTO技术栈公众号