ID：196265
fight for my love
爬虫工程师
- 公司信息：
- idataapi
- 工作经验：
- 1年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 所在区域：
- 深圳
- 南山
技术能力
1.熟练使用python语言，linux开发环境；
2.熟悉数据库MongoDB、redis、SQL等的使用；
3.熟悉Docker技术的应用；
4.熟悉开发基于flask的爬虫接口；
5.掌握pythonWeb前端开发，个人网站：taojinmin.com；
6.熟悉抓包软件fiddler、chales的使用；
7.掌握selenium自动化工具的使用；
8.熟悉scrapy及其分布式系统设计的原理。
项目经验
1.YY的合作项目，开发脚本，定时获取大淘客上商品榜单的信息；
2.某咨询公司的亿级数据处理；
3.开发接口，获取微博的搜索内容；
案例展示
-
分布式crawlab平台的应用
将分布式平台crawlab集成到个人网站的8080端口，并且配置好redis、mongo以及主从服务器的节点，高效、直观地提高爬虫效率
-
基于flask的爬虫接口的开发
基于python的flask框架，开发爬虫接口，返回列表数据的详情；将爬取端的规则、逻辑等部分跟数据处理、储存分离。
相似人才推荐
-
1000元/天硕士某211计算机类专业本硕概要：编 程 ：C/C++、Python、Java、Android开发 技 能 ：Tensorf
-
1000元/天高级工程师腾讯科技概要：1. 八年以上的软件设计及图像处理算法开发经验，数学功底扎实，对算法的验证及其实现有深入理解。
-
500元/天小程序全栈开发工程师北京直达启航概要：小程序前端 wxml+js+wxss 管理后台 vue/react 后端 Java 使用sp
-
500元/天数据挖掘工程师精益有容（北京）科技有限公司概要：1、熟练使用python数据科学生态包numpy、pandas、sklearn、matplotlib
-
500元/天无无概要：擅长前端 vue框架, 小程序开发，擅长Python ，Java熟悉spring框架，擅长熟悉mys
-
700元/天高级开发工程师伺动概要：精通JAVA、GoLang语言，多年从事前后端研发工作，尤其擅长后台管理网站的制作，有大量的电商平台
-
500元/天程序开发北京互动视点科技有限公司概要：arduino开发 单片机开发 程序设计 cisco认证CCNP 网络维护 网络设计 展
-
500元/天博士在读北京邮电大学概要：本人目前是北京邮电大学的博士在读，博二期间和朋友创业做的是金融量化分析平台，目前也在和朋友一起开发一
