海归论坛 :: 阅读主题 - 搜索引擎的一个待开发功能，客户端程序

论坛首页 | 排行榜 | 在线私聊 | 专题 | 版规 | 搜索 | RSS | 注册 | 活动日历


主题: 搜索引擎的一个待开发功能，客户端程序

海归论坛首页 -> 海归商务焦点讨论 | 精华区 | 嘉宾沙龙 | 白领丽人沙龙

分屏

表形显示

阅读上一个主题 :: 阅读下一个主题

作者

搜索引擎的一个待开发功能，客户端程序

benfangd
[博客]
[个人文集]

头衔: 海归准将
声望: 学员

加入时间: 2004/11/05
文章: 656
来自: USA
海归分: 188561

标题: 搜索引擎的一个待开发功能，客户端程序 (784 reads) 时间: 2005-8-19 周五, 09:31

作者：benfangd 在海归商务发贴, 来自【海归网】 http://www.haiguinet.com

少数IT人可能知道，在搜索引擎之初，有些网站上会放一个robot.txt文件，里面是自己网站的目录，便于搜索引擎来寻找自己网站上的资料。
可是，后来，很少有搜索引擎使用，因为维护这个文件很麻烦，每次
你要改你网站的内容，你都要改动这个文件，很多人养不成这样的好习惯。

现在回头看这个问题，我们可以在网站上跑一个服务程序，每次网站有
改动后，这个服务程序都会自动产生类似robot.txt的一个文件，这个文件当然不只是文件目录，还包括文件关键字，网站访问量。这样，搜索引擎就会省去不少自己做目录的时间，可以把处理一个网站的时间减少到90%以上。

为什么网站愿意装一个这样的服务程序呢，因为有了它，网站就更容易被
搜索引擎找到，所有，网站没有什么不愿意的。

作者：benfangd 在海归商务发贴, 来自【海归网】 http://www.haiguinet.com

相关主题
[讨论]看情人节3网图片所想到的——搜索引擎使用感受之一	生活风情	2012-2-14 周二, 10:56
常用的二十五大学术搜索引擎	海归茶馆	2011-9-20 周二, 11:55
IT招聘--国内知名搜索引擎公司-搜索研发部_多媒体内容分析高级工程师，技...	IT	2011-8-30 周二, 11:28
IT招聘--国内知名搜索引擎公司-搜索研发部_语音识别高级工程师，技术le...	海归招聘	2011-8-30 周二, 11:10
IT招聘--国内知名搜索引擎公司-搜索研发部_个性化与推荐技术研究	IT	2011-8-30 周二, 10:46
猎头-搜索引擎机器学习算法高级研究员/大规模机器学习研发工程师	IT	2011-4-01 周五, 10:50
谷歌回不来了吧？国内花巨资打造搜索引擎平台。	海归主坛	2010-8-12 周四, 18:41
【猎头职位】知名上市互联网公司-搜索引擎核心算法研究	海归职场	2009-12-03 周四, 11:29