开发者社区 问答 正文

搜索引擎的主要组成有哪些?

搜索引擎的主要组成有哪些?

展开
收起
游客qzzytmszf3zhq 2021-12-08 22:31:38 549 分享 版权
1 条回答
写回答
取消 提交回答
  • 通用爬虫:就是将互联网的上页面整体的爬取下来之后,保存到本地。通用爬虫要想爬取网页,需要网站的url.但是搜索引擎是可以搜索所有网页的。那么通用爬虫url就要涉及到所有网页,这个‘所有’是如何做到的:

    新网站向搜索引擎主动提交网址; 在其他网站上设置新网站外链; 搜索引擎和DNS解析服务商(如DNSPod等)合作,新网站域名将被迅速抓取。

    2021-12-08 22:31:48
    赞同 1 展开评论
问答分类:
问答地址: