Skip to content

doodlesomething/xdsoso

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

30 Commits
 
 
 
 
 
 
 
 

Repository files navigation

xdsoso

这个项目是一个校园搜索引擎的项目,旨在提供西电校园搜索,项目在Linux下基于Java开发,目前已经完成基本的爬虫部分、网页存储、中文分词部分,项目正在持续进行中。
关于这个项目的历程可以看看我的博客中校园搜索引擎开发的介绍


src目录中主要为程序源码,doc为程序中用到的存储文件和字典文件,可以考虑将其分开

项目中用到的第三包包括:1.[HtmlParser](http://htmlparser.sourceforge.net/)主要用于提取文本内容的提取和标签如链接的提取;2.[cpDetector](http://cpdetector.sourceforge.net/)主要用于网页编码的预检测方便转换为统一的编码存储
**补充:**可能由于我项目中使用第三方包、平台的不同和文件路径的不同可能在您的机器上不一定能运行请见谅。

爬虫部分的架构UML图如下: 爬虫架构

About

西电校园搜索引擎

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

 
 
 

Languages