目的 DataFetch 作为一个获取数据的爬虫程序,要满足公司所有数据抓取需求。对其他项目的进行提供数据支持。 DataFetch 也是一个独立的项目,将使用Scrapy框架进行开发。另外会提供一些接口服务来被其他人使用。 已经支持的功能 从 PubMed 上搜索和批量下载文献的摘要。 从 GWASdb 上搜索和增量下载。 批量下载小说