基本信息

案例ID:222765

技术顾问:Wen. - 8年经验 - 北京中浦天投科技有限公司

联系沟通

微信扫码,建群沟通

项目名称:爬虫:豆瓣TOP250数据

所属行业:电子商务 - B2B

->查看更多案例

案例介绍

1.使用Scrapy爬取豆瓣电影Top250的数据;
2.爬虫逻辑:在movie_top250页面中爬取详情页链接,并生成Request请求,随后在详情页中定位数据并爬取;
3.使用SQLAlchemy模块建立数据模型,并将爬取的数据分别保存至MySQL数据库和json文件。

相似案例推荐

其他人才的相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服