大家都知道Google是依靠各个网站里robots.txt来让蜘蛛识别出网站结构和抓取目录,实现对网络的索引的。但有人刚刚发现,Google自己还有一个humans.txt来告诉大家Google可不仅仅只知道算法和机器。
在这个humans.txt文件里(上图)写着:
Google是由一队庞大的工程师、设计师、研究员和机器人打造的,全球不同网站都有他们的身影,随时持续更新,更多的使用工具和技术而非人肉。如果你想帮助我们,请看google.com/jobs
Google的Tim Bray在自己的twitter里泄露出了这个地址,这才让我们发现humans.txt。
另外,YouTube的robots.txt文件里最近加了一句恶搞:
创建于随着机器人的崛起将人类大清洗90年代中期之后的遥远的未来(2000年)。
Via GOS
Related posts
- 神秘的 Google Compression Test
- 【快乐周末】YouTube 的 robots.txt:机器人暴动灭绝人类?
- Google Reader Play 的内容开放索引?
- 专门的 Googlebot-News 爬虫跟 Googlebot 合并
- Google 疑欲推 “实惠搜索” 拯救团购泡沫
- Google 发布 Robots.txt 详细说明
- 新版 YouTube 播放器全面上线
- Google 与 Dish Network 测试电视节目搜索服务
- 所有新上传到 YouTube 的视频都会有一个 WebM 格式版本
- 觉得 YouTube 视频载入太慢?那就玩会贪吃蛇吧!
没有评论:
发表评论