和某医院合作训练大模型，训练数据需要采集大量文献期刊（共156个期刊，医院已购买期刊会员），利用爬虫技术完成数据自动化采集与管理。
1. 开发相关脚本实现数据自动化采集，Python3、Selenium、Requests、BeautifulSoup等。
2.文献资料自动保存为PDF文件。
3.输出采集日志，采集记录保存到Mysql数据库。