hmdbSpider

[toc]

---

0x01 简介

其他自动化数据处理脚本也放到这个项目中

1. 本程序用于爬取并比对QI和hmdb数据库中的数据，筛选需要的数据。(hmdb_spider.py)

2. pubmed文献爬取。(pubmed_spider.py)

---

0x02 使用方法

• 爬取目标网站 https://hmdb.ca/metabolites/HMDB0000792
• HMDB0000792是从QI中获取的数据ID
• 爬取数据后，比对QI和hmdb数据库中的数据，筛选Blood Endogenous Animal的数据
• 从data.txt输入数据，比对结果保存在data/result.csv中

1. 安装依赖

pip3 install -r requirements.txt

2. 运行程序

python3 hmdb_spider.py

3. 命令备份

pip3 freeze > requirements.txt