真正的网络搜索引擎诞生地和被遗忘的网络搜索引擎之父:Jonathon Fletc
优采云 发布时间: 2022-05-21 09:39真正的网络搜索引擎诞生地和被遗忘的网络搜索引擎之父:Jonathon Fletc
28年前,正是在斯特灵大学的计算机实验室里,Fletcher发明了世界上第一个网络抓取搜索引擎,也正是这项技术推动了谷歌、必应、雅虎等主流互联网搜索工具的诞生。
Jonathon Fletcher和Jump Station
1992年夏天,在大洋彼岸的苏格兰,年轻的斯特灵大学毕业生Jonathon Fletcher获得了计算科学Computing Science一等学位,并获得前往格拉斯哥大学攻读3D图形学方向博士的全额奖学金。妥妥地风华正茂,前程大好。然而还没来得及入学,就被告知经费被砍,读博计划因此泡汤,前途堪忧。Jonathon Fletcher只好重返校园,在技术部门找到了一份系统管理员的工作。然而也正是这迫于生计的选择让Fletcher第一次接触到了互联网和Mosaic的What's New页面。
1993年,互联网还处于起步阶段。Mosaic也发布不久,收录的网页数量也只有几千。Jonathon注意到Mosaic有一个 “What’s New”的页面,用来为新建网站做索引,方便用户检索。然而由于当时技术所限,新创建的网站要列入该索引页面,只能先在Mosaic的开发团队-伊利诺伊州大学香槟分校的国家超级计算中心,即NCSA注册,然后手动登录输入新页面的链接。效率低的超乎想象。
图源:
当时负责为斯特灵大学搭建网站的Fletcher注意到,由于Mosaic索引页面是手动更新,如果已经进入索引的网站有更新也无从跟踪。这就导致许多网站的链接非常容易过时,甚至出错,使用体验很是糟糕。因为最早建立网站的都是一些学术机构,本意是为了方便大家交流,但是随着网站数量越来越多,如何找到自己需要的内容,就成了问题。
当时在斯特灵大学担任系统管理员的Fletcher,主要工作内容就是保证实验室的正常运行,解决一些技术问题,偶尔也负责一些行政方面的杂事。薪水微薄,甚至负担不起房租,要么睡在朋友家里的地板上,要么睡在实验室。然而作为一个计算机科学专业高材生,虽然没钱,但有的是时间,而且是天天守着电脑的时间。所以决定发挥专业特长,自己写代码创建工具,解决这一问题。这个工具就是世界上第一个互联网爬虫,第一个允许用户通过关键词检索并浏览网页的网络搜索引擎,Fletcher给它取名为JumpStation,寓意用户可以从一个站点跳转到另一个站点。
JumpStation使用一个完全由网络爬虫创建的索引,因此本质上是一个自动化的程序,可以收集访问的所有网页以及网页上的链接。
用户在网络表单上输入关键字检索,与这些关键字相匹配的URL列表就会展现在搜索结果页上。十天后,Jonathon就为25000个网页建立了索引。世界上第一个现代搜索引擎正式上线运行。
超前于时代的应用,未获赏识与支持
到1994年6月,JumpStation已经索引了275,000个网页。因为运行在共享服务器上,磁盘空间非常有限, Fletcher决定只收录网页的标题和heading,即便如此,存储空间仍是捉襟见肘。要继续增加索引量,就需要更多的磁盘空间,而当时的磁盘又小又贵,持续运行就需要持续的资金投入。
然而,一方面作为世界上第一个网络搜索引擎,JumpStation过于超前,鲜少有人看到其潜力,因此尚未得到资本的青睐;另一方面,Flectcher虽是斯特灵大学技术部门的工作人员,但JumpStation却并不属于他的工作内容,更多的是一个技术宅,牺牲了社交生活的业余爱好。
要知道在90年代中期,随着Netscape和Internet Exploer等浏览器的崛起,网络信息检索,或者所网络搜索引擎变得格外重要。尽管在JumpStation之前,也存在搜索引擎,但或者搜索内容十分有限,比如只能搜索FTP文件的Archie,或者只能靠人工以特定形式文件通知管理员网站的存在,而不是使用网络机器人。
相比之下,1993年12月由Jonathon Fletcher创建于斯特灵大学校园的JumpStation, 首次将将网络搜索引擎的三大基本功能(抓取、索引和搜索)融合在一起, 成为第一个真正意义上的网络搜索引擎。比1998年Larry Page 和Sergey Brin在加州创建谷歌早了五年。Jonathon Fletcher创建的JumpStation远远超前自己的时代,甚至可以说是过于超前了。在那个网站还是个新奇存在的年代,很多网站主甚至认为JumpStation抓取他们的网页是一种入侵行为,并警告他停止这种行为。也有世界各地程序员联系他,询问JumpStation到底是怎么运行的。这也说明即使是专业的计算机科学家,也有很多人并不理解这种技术,自然也无从发现其潜力。
1994年底 JumpStation在Fletcher离开斯特灵大学前往东京从事金融相关工作后关停。
时隔二十年,淡然面对得失
2013年谷歌庆祝成立15周年之际,远在香港的Jonathon Fletcher在接受采访时表示,回顾回顾过去总是不切实际的,我们总是要做好手头的事,然后向前看。以我们现在对搜索引擎的了解,你会说,事情本应该是另外的结局。但在当时,我只是做了自己想要做的事情,而且在当时也是对的事情。至于后续的发展无从改变。
2013年8月,全球搜索引擎专家齐聚爱尔兰都柏林三一学院,庆祝网络搜索20周年。作为全球第一个网络搜索引擎的创建人,Jonathon受邀出席,并与微软、雅虎和谷歌的代表共同参与小组讨论。
至此Jonathon对网络搜索引擎贡献终于得到认可。
图片来源:BBC (中间为Jonathon Fletcher。)
Jonathon表示在讨论中表示,网络或许不会一直存在,但搜索信息的需求会一直在,这种需求和搜索媒介无关。尽管深知当前的搜索引擎让一些人赚得盆满钵益,但这位斯特灵大学的杰出校友并不遗憾。“父母妻儿都以我为荣,这些对我来说已是无价之宝。”