ID：217964
villi
Python爬虫工程师
- 公司信息：
- 杭州华泰一媒文化传媒有限公司
- 工作经验：
- 3年
- 兼职日薪：
- 800元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 所在区域：
- 杭州
- 西湖
技术能力
精通: Python基础、Office、HTML
熟练：CSS、JS、Ajax、Scrapy、Xpath、Re、Requests、Selenium、MySQL、Redis、Mongodb，Postgresql
熟悉：Django、Pandas、Numpy、Matplotlib、HDFS、Tesseract、Sklearn、Git
项目经验
1) 项目概况：
招标网站：财政厅浙江政府采购网、各县市区公共资源交易网、温州招标网
温州政彩云、温州国企采购平台
关键字：调查、清查、普查、建库
采集内容：数据来源、发布时间、招标公告、招标网址
2) 遇到问题及解决方案如下：
1. 分析目标网站真实request地址和response内容，使用IP代理池试水网站反爬虫级别，检测是否有投毒数据。
2. 采用IP代理池及随机User-Agent反反爬
3. 采用re获取网页数据
4. 保存数据到Excel中
5. 使用logging模块编写监控程序进行爬虫监控，并根据日期定向输出日志到log文件
相似人才推荐
-
600元/天python开发工程师深圳传音股份有限公司概要：熟练掌握 Python ，以及Django、odoo、flask等常用框架； 熟练使用Mysql、
-
800元/天高级python开发西安联创佳讯有限公司概要：熟悉网络编程, Socket、TCP/IP、UDP、HTTP/HTTPS 及相关标准 熟练使用
-
500元/天python实习生寰宇科技概要：1. 系统掌握 Python,有扎实的爬虫开发经验 2. 熟练使用 scrapy 框架及分布式
-
500元/天高级python工程师四川某互联网公司概要：1. 熟练掌握Python 、shell 编程，熟练地使用第三方库 ，比如kafka，Elastic
-
500元/天python开发工程师四川互动工场科技有限公司概要：熟练掌握 Python 编程语言及 PEP-8 代码书写规范; 熟悉使用 Python web 框 -
600元/天高级python爬虫工程师上海汇航捷讯网络科技有限公司概要：1.python 基础扎实，深入理解 python 进.线.协程 2.熟练掌握关系型数据库 mys
-
800元/天高级Python后端开发工程师泛微网络有限公司概要：五年项目开发经验 包括后端项目，搜索项目，运维项目，爬虫项目，全栈，自然语言处理项目 精通pyt
-
500元/天Python工程师崇州捷普概要：- 核心Python：扎实的Python编程语言基础，包括数据类型、控制结构、函数、模块和面向对象编
