搜索引擎建立的地址库中,URL主要来源于哪些方面?
搜索引擎建立的地址库中,URL主要来源于哪些方面?
A、人工录入的种子网站
B、站长通过搜索引擎页面提交进去的网址
C、站长通过XML网站地图、站长平台提交的网址
D、?蜘蛛抓取页面后,从HTML中解析出新的链接URL,与地址库中的数据新型对比,如果地址库中没有的网址,就存入待访问地址库
正确答案:人工录入的种子网站|站长通过搜索引擎页面提交进去的网址|站长通过XML网站地图、站长平台提交的网址|?蜘蛛抓取页面后,从HTML中解析出新的链接URL,与地址库中的数据新型对比,如果地址库中没有的网址,就存入待访问地址库
- 上一篇:预制混凝土柱连接节点通常为()连接。
- 下一篇:搜索引擎蜘蛛的爬取策略包括哪些?()