用于西师校园网的共享文件与FTP的快速搜索引擎

目前xx校园网内有上百台FTP服务器，以及无数基于SMB的共享文件资源。它们包括常用软件、多媒体课件、DOC文档、MP3、Video、Flash等。但它们分散在各处，检索起来非常困难，这使得很多师生不得不浪费时间去外面寻找已有资源，也占据了出口带宽。 
主要功能：在Nosey parker技术上加以改进，构建一个类似于北大天网bingle.pku.edu.cn那样的快速搜索引擎，索引xx校园网的共享文件与FTP服务器，为群校师生提供一个虚拟硬盘。特性包括：自动搜索、及时更新、模糊查询，频率排行等。如果时间允许，可以在更大的范围内应用。 

小弟目前正在做一个有关这个题目的论文，因为涉及到技术问题而无法解决，请高手指点。如有可能最好能给出全部代码，或者相关详细的技术资料。 
在次先谢过了！！！ --------------------编程问答-------------------- 帮顶

补充：.NET技术 ,  ASP.NET