Tag Archives: search

Doug Cutting 离开雅虎

两年前我写道 Yahoo! “应该担心 Doug Cutting 别被 Google 挖去”,现在这个担心成为现实。对”从来就不是一家搜索公司”的 Yahoo! 来说,坏消息是 Doug Cutting 离开了,好消息是他没加入 Google ,也没去微软,而是加入 Cloudera (via)。Cloudera 致力于提供 Hadoop 企业级支持,关心 Hadoop 的人可以松口气,即使 Yahoo! 不再支持这个项目,也还有 Cloudera 接棒呢。

可能所有人都间接用过 Doug Cutting 的作品,他是 Lucene NutchHadoop 等项目的发起人,是他把高深莫测的搜索技术形成产品贡献给普罗大众,某种意义上的盗火者,国内很多网站的搜索引擎都有他的项目的影子。

从此之后,Yahoo! 也可以说自己”再也不是一家搜索公司”了。

EOF

Yahoo! 与 Hadoop

hadoop-logo.jpg

Yahoo! 和 Carnegie Mellon 大学合作的开源分布式计算项目代号为 M45,这个 超级计算集群 有 4000 个处理器,3T 内存,1.5 PB 存储空间,自称足以跻身世界超级计算机 50 强。这两天网络上搜索最火的一个词应该就是 Hadoop 了吧? 雅虎的这套集群就是跑在 Hadoop 上。

Hadoop 现在已经有很多不错的应用案例可以参考,比如这篇 Running Hadoop MapReduce on Amazon EC2 and Amazon S3

Yahoo! 或许早意识到自己的 Web 1.0 方式下的计算能力比 Google 差的太远,干脆放手一博,助力 Hadoop 项目,期望能借助开源的力量与 Google 掰一下手腕。从这里我们得知 Yahoo! Hadoop 团队早在 06 年就成立了,当然,这个团队成立的前提是 Doug Cutting 入职雅虎。

雅虎现在不应该担心追不上 Google ,应该担心 Doug Cutting 别被 Google 挖去,否则,可真的没机会了。

EOF

一些来访者查询的诡异内容

因为用 Google Reader 订阅了本站后台的 Activity Log,有的时候观察到一些奇怪的查询内容。比如,这几天频繁出现的查询是:黄垂玲。搜索我的 Blog 应该不会出现这个内容吧? 我也是查询 Google 后才知道怎么回事。友情提示,建议这位着急的朋友去电驴上或者用迅雷搜索一下,就别在我这里折腾了。

仔细看看这些系统后台日志,发现还有的人反复的查询 ”Arch and 1=1“或者相近的内容。准是 “SQL 注入攻击” 的安全扫盲文章看多了,我这个破站有啥内容值得注射的? Dreamhost 三天两头宕机,安全性差的狠。友情提醒: 您的IP已经被我记录,歇会儿!别累着。

更为诡异的一个查询是”lesbian“,我彻底晕了。如果是中国人,建议安装个金山词霸,如果是外国人,我建议你还是去 Google 查询: define:lesbian , 或者 Flickr 查询图片吧!

EOF

五月杭州,侠客行

上周参加CSDN 英雄会,有一些 Blogger 已经在感叹纯技术的会议太少,接下来五月份阿里巴巴的网络工程师侠客行大会将主要面向技术论道。对于”侠客行大会”,官方网站上这段介绍很有意思:

公元二零零七年,正值互联网风起云涌之时,网络开发侠客辈出。我们盛邀众风云“网侠”,立马吴山,龙聚钱塘,青梅煮酒,腊八粥布宴,研修“网侠岛”石壁图谱,论道互联网世纪之变。群英荟萃,集思广益,纵目一望,洋洋大观,问“网”间武艺侠情,直叫人慕名而往。

侠客行,我理解就是面向工程师的盛会。
目前我得知的消息:PHP 之父 Rasmus Lerdorf 已经确定行程。想到即将近距离聆听 PHP 之父的演讲,有些激动,提前发布一下小道消息。关于互联网的一个主要话题:搜索,有两个好消息,一是 Yahoo! 首席科学家 Jan Pedersen 已经确定; 另外一个是国内将有很多搜索顶尖专家将会参加,包括百度雅虎中国酷讯等多家公司的多位专家。
我另外也向组织该会的同事推荐了 del.icio.us 的 Joshua Schachter 与 Lucene 背后的大师 Doug Cutting。国内的豆瓣抓虾等技术牛人,我也非常希望他们能来分享技术。
当然,任何事情都会有遗憾,我本来非常期待的 Flickr 架构师 Cal Henderson 因为时间冲突,而 Flickr 的两位创始人 Stewart Butterfield 与 Caterina Fake 因为私人事情(的确是私人事情,在这里也不方便说,呵呵)也不能参加。
关于 Java 方面的牛人更多,等有机会再行介绍。
随着时间的变化,一些人的行程估计会有调整,请关注官方网站的公告为准。
另外,大家关注那方面的话题,请留言说明,我也将把收集到的意见转交给相关同事。
补充:关于作为观众如何报名参会参考地址
EOF