Googlebot开始检索网站深层内容
感谢MZPDA智能手机网的投递
新闻来源:驱动之家
Google公司今天宣布,其Googlebot web信息采集系统将开始自动填写HTML表单,并记录反馈结果。Google搜索引擎似乎在不顾一切的吞食来自互联网的数据,仅去年1年它就吞下了约100 Exabytes(1 Exabyte=1000000000 Gigabyte)的数据。之前Google并不触及大量的深层页面(也就是网站中被隐藏的内容,例如没有连接的页面,非文本的内容,或是动态内容返回的结果),但是从今天开始,Google将开始对这些页面进行检索。
据Google表示“对于文本框,我们的电脑会自动对网站上的表格进行填写,并会选择菜单,复选框,以及相应的按钮,然后索引有价值的HTML结果。”Google指出,对于动态表格所反馈的结果并不影响对网站的普通检索,排名或是其他的内容。并且Googlebot绝对会遵守robots.txt的规定不对禁止访问机器人访问的页面进行检索。
据估计,目前互联网上的深层页面要比目前公布的页面大几个数量级。而且有消息指出,Google永远也不能把互联网上的所有内容都检索到,其 Googlebot的爬行结果对于整个互联网来说只是管中窥豹。不过Google表示,对深层页面的索引只是为了找出更多动态页面之间的联系,而不仅仅是 为了索引结果。
18
对本文中的事件或人物打分
对本篇新闻报道的质量打分
现在评论本文
热门评论
相关新闻
谷歌中国业务未受涉黄影响 二季度收入增长加速
Google Update 不会再一直占着进程...
Google首页手机版大改进 支持更多手机和语...
Google Images 广发英雄帖 - 数...
谷歌在非洲推SMS服务:可通过短信买卖商品
谷歌搜索张冠李戴:“迈克尔杰克逊”死于2007...
Google Page即将转移至Google ...
杰克逊搜索量激增 谷歌误以为发生网络攻击
谷歌音乐专题纪念迈克尔•杰克逊的音...
谷歌启动Web加速计划 拟改进TCP/IP和H...
谷歌开辟新网站大力宣传网络提速
社交网技术宣传要员Kevin Marks决定弃...
国外设计师:我为什么讨厌Google的Logo...
iGoogle创新设计大赛Theme作品展 艺...
种种迹象表明谷歌语音服务即将正式推出:初期只面...
Google Update 不会再一直占着进程...
Google首页手机版大改进 支持更多手机和语...
Google Images 广发英雄帖 - 数...
谷歌在非洲推SMS服务:可通过短信买卖商品
谷歌搜索张冠李戴:“迈克尔杰克逊”死于2007...
Google Page即将转移至Google ...
杰克逊搜索量激增 谷歌误以为发生网络攻击
谷歌音乐专题纪念迈克尔•杰克逊的音...
谷歌启动Web加速计划 拟改进TCP/IP和H...
谷歌开辟新网站大力宣传网络提速
社交网技术宣传要员Kevin Marks决定弃...
国外设计师:我为什么讨厌Google的Logo...
iGoogle创新设计大赛Theme作品展 艺...
种种迹象表明谷歌语音服务即将正式推出:初期只面...

订阅新闻