问 搜索引擎 技术

请问大家
搜索引擎的流程是如何的？

我搞不懂的是
文字匹配是在蜘蛛爬取时由蜘蛛根据关键字进行爬取返回标题和地址
还是
是先用蜘蛛 爬地址 然后把爬过的地址都下载下来
然后用分析程序分析本地的thml文件进行匹配后分类存数据库
？？
多谢大侠 --------------------编程问答-------------------- 我在上看了很多都说用蜘蛛爬网页然后存数据库然后用户查数据库！
我不明白的是蜘蛛从爬取网站开始
到存如数据库的过程！
我在上看了很多都说用蜘蛛爬网页然后存数据库然后用户查数据库！
我不明白的是蜘蛛从爬取网站开始
到存如数据库的过程！ --------------------编程问答--------------------

补充：.NET技术 ,  C#