google 如何在搜索时抓取 stackoverflow 的所有问题?

How google scrape stackoverflow all questions while searching?

我在做搜索引擎。但我想知道,google 如何抓取 Whosebug 的所有数据。

根据我的直觉, 他们是否将所有 Whosebug 数据保存在 csv 文件中? 当用户输入一些编码问题时,使用一些算法并推荐用户。 或其他,

或者还有什么? 谢谢你的帮助。

将所有数据存储在 csv 中并 运行 搜索可能会花费您几个小时来检索结果。

Google 搜索引擎分 3 个阶段工作,抓取、索引和服务。

这些在这 3 个阶段工作的算法使 Google 如此强大。经过多年的优化和学习,它们经过微调,可以准确地索引每个网页并对其进行分析,而无需简单地存储所有内容,就像您建议的那样。

参考:How Search Works