天山云海综合社区

 找回密码
 注册
淘宝充值
搜索
查看: 847|回复: 0

[互联网] Google 不仅有 robots.txt,还有 humans.txt

[复制链接]
sunshine 发表于 2011-5-9 13:34:33 | 显示全部楼层 |阅读模式
大家都知道Google是依靠各个网站里robots.txt来让蜘蛛识别出网站结构和抓取目录,实现对网络的索引的。但有人刚刚发现,Google自己还有一个humans.txt来告诉大家Google可不仅仅只知道算法和机器。
               

在这个humans.txt文件里(上图)写着:

Google是由一队庞大的工程师、设计师、研究员和机器人打造的,全球不同网站都有他们的身影,随时持续更新,更多的使用工具和技术而非人肉。如果你想帮助我们,请看google.com/jobs

Google的Tim Bray在自己的twitter里泄露出了这个地址,这才让我们发现humans.txt
另外,YouTube的robots.txt文件里最近加了一句恶搞:

创建于随着机器人的崛起将人类大清洗90年代中期之后的遥远的未来(2000年)。


Via GOS

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?注册

x

小黑屋|手机版|Archiver|天山云海

GMT+8, 2024-5-17 15:15 , Processed in 0.009867 second(s), 11 queries , APCu On.

Powered by Discuz! X3.4

Copyright © 2001-2021, Tencent Cloud.

快速回复 返回顶部 返回列表