长沙Python兼职程序员

ID：281782

Lazy Sheep

python爬虫工程师

公司信息：
中职通

工作经验：
1年

兼职日薪：
500元/8小时

兼职时间：
可工作日远程

所在区域：
长沙
全区

技术能力

1.python，2.request，3.Scrapy框架，4.XPath、re、BeautifulSoup4，5.Selenium，6.MySQL，7.HTML、CSS、JS，jq，ajax 8掌握常见的爬虫、反爬虫知识及应对措施9，js逆向破解，10，scrapy-redis

项目经验

项目描述：爬取携程中国所有城市的景区相关数据
项目模块：
1.item:定义数据字段，2.spider：创建请求连接，请求参数，请求头等
3.middleware：用于配置ip代理或者user-agent，4.pipelines：储存数据到mysql数据库
技术要点：
1.用postman对请求url及相关数据包进行解析，2.Scrapy，3.jsonpath，4.mysql
项目简述：
1.最主要的步骤是用postman对请求url及请求参数做分析
2.由于返回的请求数据都是json格式所以用jsonpath进行数据解析
3.由于携程景区的数据分散在多个不同的数据包，所以需要多次回调进行提取数据
4.所有数据提取完毕后有pipelines模块对返回给scrapy引擎的数据进行存储
5.数据库用的with打开

Selenium爬取京东商品信息
项目描述：用selenium自动化输入商品名称并爬取该类商品的所有数据
技术要点：
1. Selenium，2. Xpath，3. Beatifulsoup4
项目简述：
1. 配置selenium文件对象（反爬手段），2. Selenium操作浏览器输入关键词并按下回车
3. 获取页面响应数据，4. 用xpath和beatifulsoup解析数据
5. 将数据保存到json文件中

相似人才推荐

联系需求方端客服

热门标签列表

程序员接私活程序员兼职企业外包外包案例

热门城市人才

北京兼职程序员上海兼职程序员广州兼职程序员深圳兼职程序员杭州兼职程序员成都兼职程序员天津兼职程序员重庆兼职程序员武汉兼职程序员西安兼职程序员南京兼职程序员长沙兼职程序员苏州兼职程序员厦门兼职程序员福州兼职程序员合肥兼职程序员济南兼职程序员青岛兼职程序员大连兼职程序员长春兼职程序员沈阳兼职程序员哈尔滨兼职程序员石家庄兼职程序员太原兼职程序员无锡兼职程序员南昌兼职程序员洛阳兼职程序员郑州兼职程序员南宁兼职程序员珠海兼职程序员宁波兼职程序员昆明兼职程序员东莞兼职程序员贵阳兼职程序员温州兼职程序员佛山兼职程序员中山兼职程序员海口兼职程序员常州兼职程序员兰州兼职程序员呼和浩特兼职程序员乌鲁木齐兼职程序员海外兼职程序员其他兼职程序员山东兼职程序员远程兼职程序员

热门城市职位

北京程序员招聘上海程序员招聘广州程序员招聘深圳程序员招聘杭州程序员招聘成都程序员招聘天津程序员招聘重庆程序员招聘武汉程序员招聘西安程序员招聘南京程序员招聘长沙程序员招聘苏州程序员招聘厦门程序员招聘福州程序员招聘合肥程序员招聘济南程序员招聘青岛程序员招聘大连程序员招聘长春程序员招聘沈阳程序员招聘哈尔滨程序员招聘石家庄程序员招聘太原程序员招聘无锡程序员招聘南昌程序员招聘洛阳程序员招聘郑州程序员招聘南宁程序员招聘珠海程序员招聘宁波程序员招聘昆明程序员招聘东莞程序员招聘贵阳程序员招聘温州程序员招聘佛山程序员招聘中山程序员招聘海口程序员招聘常州程序员招聘兰州程序员招聘呼和浩特程序员招聘乌鲁木齐程序员招聘海外程序员招聘其他程序员招聘山东程序员招聘远程程序员招聘

热门人才推荐

热门职位推荐

iOS工程师Android工程师前端工程师后端工程师嵌入式工程师UI设计师产品经理测试工程师运维工程师游戏工程师运营/编辑其它

找人才 | 接项目 | 招聘专员 | 京ICP备16030138号-1 | Copyright © 2015-2024 猿急送