手机浏览器扫描二维码访问
一个搜索引擎,还有比这更棒的东西么?
凯瑟琳未来自己经常登陆的网站,大多都是通过“百度一下”而知道的。凯瑟琳觉得,自己很有必要弄出一个搜索引擎来……如果要追溯的话,搜索引擎的“历史”比worldwideweb还要长。早在web出现之前,互联网上就已经存在许多旨在让人们共享的信息资源了。这些资源当时主要存在于各种允许匿名访问的ftp站点。
就目前而言,大多数网站都是大学的门户网,其他的网站实在是太少了,于是搜索引擎的存在意义就被淡化了。
但是未来肯定不会如此。
且不说自己想要将这网上这些蛋疼的人分开,从另一方面而言,因为和《洛杉矶时报》的合作也快要开始了,综合类型的网站总是会出现的,于是搜索引擎就会变得必要起来。
“也许这是一个不错的注意……”凯瑟琳撑着下巴,然后在思考着。
而艾尔莎看看时间,已经快到下午三点了,于是就去泡红茶了。
“什么主意?”
艾尔莎一边在拿着茶饼,一边问着。
“一个搜索引擎,一个能够让我们知道各种网站的一个好东西。”
“我们可以将自己想要的网页搜索出来?”
“对,就是这样。”
“这能办得到吗?”
“当然……”
虽然是肯定的回答,但是凯瑟琳最后的语气却变得有些奇怪。
搜索引擎依靠的是网络蜘蛛,即web-spider。
这是一个很形象的比喻,就如同网络被人称为“”一样(就是“网”的意思)。
准确一点来说,网络蜘蛛就是通过网页的链接地址来寻找网页,从网站首页开始读取网页的内容,找到在网页中的其它链接地址,然后通过这些链接地址寻找下一个网页,这样一直循环下去,直到把这个网站所有的网页都抓取完为止。如果把整个互联网当成一个网站,那么网络蜘蛛就可以用这个原理把互联网上所有的网页都抓取下来。简而言之,网络蜘蛛就是一个爬行程序,一个抓取网页的程序。
未来的“百度”、“谷歌”等等网站,都是建立在这样的一个基础之上的。
可是凯瑟琳突然想到自己似乎根本就没有了解过“网络蜘蛛”这个东西,虽然知道原理,但是想要弄出来……似乎还有些麻烦。
“看来还给成立一个工作组才行。”
开始了抱着双手站了起来。
“我觉得我们公司的人才已经够紧张的了。”艾尔莎将红茶和茶饼放在了凯瑟琳的桌上。
“没关系,到了五月份,这种情况就能得到缓解。”intel与斯坦福大学的合作培养的第一批学生已经快要毕业了,有了他们的加入,公司的人才紧缺的问题必然能够得到一定程度的缓解。
“至少在未来十年内,我们公司的人才都有可能是供不应求,这是一个急速扩张的产业,和那些传统行业是不一样的。”
――直到21世纪,这些行业对于人才的渴求依然是强烈的。
当然,中国除外――因为那里的人实在是太多了,乃至于都有了“it民工”的说法。
凯瑟琳坐了下来,然后喝了一口红茶。
她一边喝着茶,一边在思考着应该如何写一个网络蜘蛛的程序出来。
评价一个网络蜘蛛的好坏,有三个方式,一个是覆盖率,网络蜘蛛的首要目标是抓取互联网上所需的信息。因此,有价值的信息是否都收录,收录的比例是网络蜘蛛的基本评价指标;第二个则是时效性,即事件发生并在互联网上传播后(以新闻、论坛、博客等各种形式),用户需要通过搜索引擎尽快能检索到相应内容。而索引的前提是收录,因此需要网络蜘蛛尽快的抓取互联网上最新出现的资源;最后则是重复率,互联网上重复的内容很多,如何尽早的发现页面重复并消除之,是网络蜘蛛需要解决的问题。除转载导致的重复外,重复总能体现为各种不同的模式,站点级重复,目录级重复,cgi级重复,参数级重复等等,及早发现这些模式并进行处理,能节省系统的存储、抓取、建库和展现资源。
第一个问题最好解决,因为美国电信的根服务器就在八零后少林方丈页的覆盖率永远都是100%。
需要解决的是第二和第三个问题。
事实上这也不是个大问题,原理很容易解决,最重要的一环在于需要一个高效率的程序。
光凭自己一个人的话,可能需要不少的时间。凯瑟琳一直梦想的是当一个甩手掌柜,这事怎么能够发生呢?――于是,找人就是必须的。
最后,凯瑟琳决定从微软的phoenix-stargate开发组抽调了三个人出来,帮助开发这个网络蜘蛛程序。
反正星门系统的开发已经差不多了,这个时候自己抽调一些人出来开发网络蜘蛛完全不是问题。
网络蜘蛛是搜索引擎的一个最核心的部分。有了这个程序之后,搜索引擎的建立就会非常简单了。
那……自己的这个网站应该叫什么名字呢?
百度?
全球升温:我在末世建安全屋 我那糙不可言的夫君位及人臣了? 不教性命属乾坤 别又遇我 我,段誉,天下无敌! 得道长青 满朝文武听我心声,我摆烂吃瓜! 玉蝴蝶之倾国倾城 狐妖:续缘对象太多怎么办 美食:为了找我,食客建立情报群 贬妻为妾?这家子炮灰我罩了! 大隋锦色 穿书成女配的我惊艳了整个修仙世界 买命人,短命鬼 两界高武,肝出至高天赋 中国惊天大案 黑化后,我称霸三千大世界 王者:输了赖我,我在对面你哭啥 异世大陆:废材辅灵师 盛唐补遗
几个在现世卷生卷死,不同行业里还算小有成就的闺蜜,在一次旅行中群穿进了未知的古代国度。不同于华夏的地大物博,她们穿到了一个危机四伏的内陆小国庆国。无论身在何时何地遵循着手里有钱心里不慌的原则,搞钱为重。几年之后本是为了自己赚钱方便的她们,绘制地图,修路架桥,设驿站快递,建学堂,盖图书馆不知不觉小小的庆国成了各国...
听说原配要小三不得好死。好的,我这就完成任务。燕宁是原配复仇系统的宿主,为被抢了男人的原配向小三复仇。刚开始燕宁无意间虐了男主,第二次刚见面燕宁把...
刘季穿越到白蛇缘起世界成为小青外卖。差点被小青蛇吃掉。得到宝青坊主的喂养后才免于被饿死,看他如何给坊主洗脚报答坊主,坊主筹划几千年的复仇计划究竟是什么,看他在缘起中如何截胡小白,到浮生剧情中成为法海的弟子。弥补遗憾。拯救老许,主宰修罗城,闯出一条通天大道。宝青坊主戏份足,有逻辑。帮坊主复仇。...
蔡霜绫做了祁墨淮三年的地下情人,人前她是认真敬业的助理,人后她是他见不得光的地下情人,这种床伴关系在祁墨淮要把她推向别人时走向了结。看着这个没有心的男人,她藏起孕肚,决然离开。五年后,异国他乡,祁墨淮将找了多年的女人抵在胸膛中,看着脚边缩小版的自己,他恶狠狠地咬牙道我的种?哪知道一向顺从的女人却把他推开祁总,请自重!...
关于宝可梦我也有神奇宝贝啦!明明刚刚高考完,可以开始肆意玩耍了,没想到一朝回到解放前,直接从十八岁的妙龄少女变成襁褓中的婴儿。眼前的紫色胖子是耿鬼没错吧重返青春的父母,神奇的精灵,只有她记得原来的世界。不过只要家人朋友还在身边,就什么都无所谓了就让我也成为神奇宝贝训练家吧!在这个神奇的世界,遇见新的伙伴,绽放出羁绊的光芒吧!...
关于慢半拍的大聪明(本文架空不具备考据价值,男主会有但会是工具人,不喜误入。)你敢信,我一个大聪明胎穿了一个小傻子!柏灵秀小名糖糖,抬头望天,慢悠悠的抬起袖子,擦了一下流出来的口水。这是什么地狱级的待遇?一个天才少女,穿进傻子壳里的生活日常。...