中文
大众点评网探讨更好的合作模式,希望能和更多第三方专业垂直网站进一步加强合作,共同为广大网民提供更好的信息服务。 名词解释 Robots协议(也称为爬虫协议、机器人协议等)的全称是“网络爬虫排除标准”(Robots Exclusion Protocol),网站通过Robots协议告诉搜索引擎哪些页面可以抓取,哪些页面不能抓取。
共计1页,1条