1,python爬虫(scrapy框架,json,re去掉多余的字符串,xpath 提取数据)获 取数据,由于获取详情页的工作要求有js加密,有采用了selenium模拟浏览器爬取 (BeautifulSoup提取数据)数据获取并储存到MySQL数据库。 2,ps美工,负责前端可视化页面布局设计。 3,辅助java清洗数据
1.项目描述: 项目描述:分析职位:大数据,互联网营销,python,Java,软件开发,新媒体运营。 地区:北京,上海,深圳,广州,贵阳。 项目计划: 1.明确项目需求 2.数据获取(python爬取智联,拉钩招聘网) 3.数据清洗(java ) 4.web前端可视化大屏展示(html,css,js) 5.前后端链接 6.项目整体修改 7.项目文档完成项目概述提交。
2,中国地震预测概率分析
项目描述: 项目描述:项目产生:基于近几年来我国大小型地震越来越多,我们就基于地址预测局官网 数据和一些网上的数据进行了分析。 项目策划:小组开会分析项目,理出详细的计划书,一起学习项目所需的技术和知识。 项目过程:运用python爬虫抓取网页数据的功能进行数据的提取,为数据的来源提供了可靠 性,使我们分析的概率更加准确。数据分析出来并用了前后端链接,进行了数据的可视化展 现,使得我们的项目更明确的展现出我们分析的目的。
1,python爬虫(scrapy框架,json,re去掉多余的字符串,xpath 提取数据)获 取基本工作信息,由于获取详情页的工作要求有js加密,有采用了selenium模拟浏览器爬取 (BeautifulSoup提取数据)数据获取并储存到MySQL数据库。 2,ps美工,负
1,python爬虫(scrapy框架,json,re去掉多余的字符串,xpath 提取数据)获 取基本工作信息,由于获取详情页的工作要求有js加密,有采用了selenium模拟浏览器爬取 (BeautifulSoup提取数据)数据获取并储存到MySQL数据库。 2,ps美工,负