😳
数据采集工程师
- 公司信息：
- 天津某科技公司
- 工作经验：
- 5年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 所在区域：
- 天津
- 全区
技术能力
1、熟练掌握python语言开发
2、精通python面向对象开发
3、熟悉Linux系统的常用操作
4、遵守PEP8b代码规范
5、熟练使用requests,urllib,urllib2
6、熟练使用数据解析方法：xpath、bs4、re
7、熟练使用scrapy框架，selenium自动化
熟悉使用数据库 Mysql、Mongodb、Redi
项目经验
APP抖音数据
项目描述：爬取抖音视频和音乐
本职工作：负责爬取视频和音乐
项目技术：fiddler抓包工具、安卓模拟器 os、json、requests
项目问题：
1、获取不到对应的json包 解决方案：在fiddler4的脚本里写自动获取对应的json包的脚本
2、获取不到其他视频json包 解决方案： 在模拟器中设置记忆功能 模拟人的操作一直翻页 一直获取视频的json包
团队协作：数据采集1人
团队规模：总参与1人，总开发15天
游戏信息数据
项目描述：爬取人气排行榜前100数据信息
本职工作：使用多线程生产者消费者模式爬取数据
项目技术：requests、threading、etree、re、Queue、json、pymysql
项目问题：1、请求下来的源代码字符集错误 解决发案：用encoding=utf-8解码
2、在爬取过程中 人气排行榜100中有 一个为广告没有游戏信息 解决方案：
用错误处理来跳过
团队协作：数据采集1人、MySQL数据1人、
团队规模：总参与2人，总开发14天
案例展示
-
抓取疫情数据并实现数据可视化
使用python抓取疫情数据，然后使用numpy对数据进行处理，最后使用pyecharts库实现数据可视化。
-
图像识别
使用python语言中的OpenCV2模块对图像进行识别和numpy模块对数据进行计算，最终实现车牌识别。
相似人才推荐
-
500元/天后端开发工程师计蒜客概要：团队协作：熟悉 git、gitlab；可以熟练进行敏捷开发和 gitlab flow 工作流 工程
-
500元/天人工智能算法工程师没有概要：我学过c/c++和python，会app开发，会数据采集（互联网数据采集、大数据集成）、数据分析、智
-
900元/天Senior Associate上海普华永道概要：精通 JAVA ，多线程，并发。熟练使用常用开源框架：Spring、SpringMVC、Spring
-
500元/天软件工程师鑫达自控概要：五年php经验，两年上位机开发经验（c#，vb），小程序开发经验也有。 熟悉PHP语言，并
-
600元/天软件开发工程师江苏润和概要：因为上一份工作主要在做帆软报表相关的开发，为了不因为长久不使用这个软件而逐渐忘记这项技能，所以想接一
-
500元/天高级架构师，资深技术专家武大吉奥概要：拥有团队运作，全栈开发，涉及微信，小程序，网站，前后端维护开发，拥有高级架构师，可规划和设计企业中长
-
800元/天数据开发浦发硅谷概要：报表开发，数据库开发，数据治理，数据清洗，数据抽取，数据转换，数据提取，网页开发，sql性能优化，存
-
500元/天大数据开发工程师某快运概要：数据库技术方面：熟练使用Oracle，Mysql 关系型数据库，以及sql编写。对存储过程以及sql
