Robots排除协议,它是网站管理者表达是否希望爬虫自动获取网站信息意愿的方法。


Robots排除协议,它是网站管理者表达是否希望爬虫自动获取网站信息意愿的方法。

A.正确

B.错误

正确答案:A


Tag:爬虫 网站 管理者 时间:2023-11-22 22:03:09