跟踪英文 Blogger 圈子对中文网志年会的报道,在 O’Reilly Radar 的一篇 Blog 上注意到了这个基于 Skype 的 RSS Reader: anothR。
Skype 用户只需要把 anothR.com 机器人加到自己的联系人中。然后给这个联系人发一个 RSS 地址即可订阅这个 RSS Feed。机器人会详细提示使用方法。挺有创新性的 Web 2.0 应用。O’Reilly Radar 的那篇 Blog 说这个应用是在网志年会上启动的,我怎么一点都没有听说? 还是这个老外搞错了?
(BTW: 这个老外说”Skype was on >80% of the computers I used while I was in China”, Skype 在中国有 80% 以上计算机都在使用? 他不是来中国只在易趣呆了几天吧?)
这个工具的界面:
eBay 的数据量
作为电子商务领头羊的 eBay 公司,数据量究竟有多大? 很多朋友可能都会对这个很感兴趣。在这一篇
Web 2.0: How High-Volume eBay Manages Its Storage(从+1 GB/1 min得到的线索) 报道中,eBay 的存储主管 Paul Strong 对数据量做了一些介绍,管中窥豹,这些数据也给我们一个参考。
站点处理能力
- 平均每天的 PV 超过 10 亿 ;
- 每秒钟交易大约 1700 美元的商品 ;
- 每分钟卖出一辆车A ;
- 每秒钟卖出一件汽车饰品或者配件 ;
- 每两分钟卖出一件钻石首饰 ;
- 6 亿商品,2 亿多注册用户; 超过 130 万人把在 eBay 上做生意看作是生活的一部分。
在这样高的压力下,可靠性达到了 99.94%,也就是说每年 5 个小时多一点的服务不可用。从业界消息来看,核心业务的可用性要比这个高。
数据存储工程组控制着 eBay 的 2PB (1Petabyte=1000Terabytes) 可用空间。这是一个什么概念,对比一下 Google 的存储就知道了。每周就要分配 10T 数据出去,稍微算一下,一分钟大约使用 1G 的数据空间。
计算能力
eBay 使用一套传统的网格计算系统。该系统的一些特征数据:
- 170 台 Win2000/Win2003 服务器;
- 170 台 Linux (RHES3) 服务器;
- 三个 Solaris 服务器: 为 QA 构建与部署 eBay.com; 编译优化 Java / C++ 以及其他 Web 元素 ;
- Build 整个站点的时间:过去是 10 个小时,现在是 30 分钟;
- 在过去的2年半, 有 200 万次 Build,很可怕的数字。
存储硬件
每个供货商都必须通过严格的测试才有被选中的可能,这些厂家或产品如下:
- 交换机: Brocade
- 网管软件:IBM Tivoli
- NAS: Netapp (占总数据量的 5%,2P*0.05, 大约 100 T)
- 阵列存储:HDS (95%,这一份投资可不小,HDS 不便宜, EMC 在 eBay 是出局者)
负载均衡与 Failover: Resonate ;
搜索功能: Thunderstone indexing system ;
数据库软件:Oracle 。大多数 DB 都有 4 份拷贝。数据库使用的服务器 Sun E10000。另外据我所知, eBay 购买了 Quest SharePlex 全球 Licence 用于数据复制.
应用服务器
应用服务器有哪些特点呢?
- 使用单一的两层架构(这一点有点疑问,看来是自己写的应用服务器)
- 330 万行的 C++ ISAPI DLL (二进制文件有 150M)
- 数百名工程师进行开发
- 每个类的方法已经接近编译器的限制
非常有意思,根据eWeek 的该篇文档,昨天还有上面这段划掉的内容,今天上去发现已经修改了:
架构
- 高分布式
- 拍卖站点是基于 Java 的,搜索的架构是用 C++ 写的
- 数百名工程师进行开发,所有的工作都在同样的代码环境下进行
可能是被采访者看到 eWeek 这篇报道,联系了采访者进行了更正。我还有点奇怪原来”两层”架构的说法。
其他信息
- 集中化存储应用程序日志;
- 全局计费:实时的与第三方应用集成(就是eBay 自己的 PayPal 吧?)
- 业务事件流:使用统一的高效可靠消息队列. 并且使用 Cookie-cutter 模式用于优化用户体验(这似乎是大型电子商务站点普遍使用的用于提高用户体验的手法)。
后记
零散作了一点流水帐。作为一个 DBA, 或许有一天也有机会面对这样的数据量。到那一天,再回头看这一篇电子垃圾。
更新:更详细信息请参考:Web 2.0: How High-Volume eBay Manages Its Storage。可能处于 Cache 的问题,好几个人看到的原文内容有差异
–EOF–
网志年会之赞助商
这次雅虎中国是赞助商之一,从北京来了六个人。带来了好几箱子小礼品,每个 Blogger 做一份调查问卷即可获赠一个小礼品:书签夹。这个是为雅虎收藏+特制的,不过外包装上有个小 Bug 。有一个参会者说,我填了调查问卷,那个”如意”给我一个。还别说,书签夹还真是个如意形状。雅虎收藏+ 的作者张月也来到了现场,和不少朋友做了交流。
Yupoo 也是这次年会的合作伙伴。几乎是全程图片直播。估计年会过后流量又该有不小的增长。平阳要乐坏了吧?
其他一些赞助商没怎么了解,有个赞助商提供无线接入点,可惜那个 Web 页面我始终不能打开。
零零散散写了好几篇流水帐。这是最后一篇。
这次年会最辛苦的是志愿者们,向他们表示一下敬意!
–EOF–
网志年会报道之花絮
车东看着会场说:”这里是中国 Blogger 密度最大的地方…”。另,车东昨天不巧没赶上飞机,滞留杭州。
有个女 Blogger 长的很象台湾的那个漫画家朱德庸,女版朱德庸。尤其是头发很像。
陈序尔剃了个光头,很像那个相声演员陈寒柏。大家可以找照片看看。还好他不知道我是谁。
从台湾来的 Vista ,很像个学生:) 我不知道是否有从港澳来的 Blogger. 据说台湾来了七八个人呢。
和土豆网的 Aether 聊,
我问:你们老大王微没来?
他说,没来…(若干句省略)…你常和马云吃饭么?
我(愕然状): 资格不够,
他说:我们老大总和马云一起玩…
参会年龄最大的 Blogger?
会议室一共有两个门,有一个门开始没有打开。一位老大爷非要开那个门,我以为是参会的 Blogger ? 问了一下原来是找洗手间的…
周日下午,阿北站在靠右边的窗户边看讲座,大家找他合影,阿北姿势没变,前后五个人与他合影。有人开玩笑说,这个景点要收费。
都说六度分割,但会场里每两个人的关系不会超过 3 度。
–EOF–