ID：176439
C 身份已认证
高级爬虫工程师
- 公司信息：
- vivo
- 工作经验：
- 3年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 所在区域：
- 深圳
- 福田
技术能力
1. Html css javascript
2. Python C/C++ QT
3. http 协议，socket 网络编程，数据结构算法
4. Hadoop fdfs，pandas。会使用
5. Reques，urllib3 ，异步编程 ,自动化工具 selenium,appium,pupeter,airtest
6. Redis,mysql,mongodb
7. 熟悉 Liunx 服务器
项目经验
项目描述: 爬取抖音的用户信息以及每个视频，在进行视频的切割。交给算法工程师做后期处理
工作内容:
1. Mitmproxy,mitmweb,夜神模拟器，airrtest，进行接口分析。
2. 用户接口中首先需要的参数有:uid 和 shor_id
3. 需要返回真正的视频数据链接的是通过_signature 的签名算法加密
4. 用户中的 dytk 参数。
5. 以及每个 json 返回的 max_cursor 最大时间戳组成的 URL 返回视频 json
知乎的请求头加密，大众点评，新浪微博登录解密，芒果 tv 视频，YouTube 视频下载等等项目
使用 c++语言搭建爬虫软件的服务器接口
工作内容:
1. 实现日志系统主要功能:监控服务器性能预警、以及脚本异常日志
2. 爬虫日志展示 API、搜索 API、增删改查以及调用公司内部员工登录接口做登录验证
3. 分布式文件系统管理:图片以及视频文件主要技术为 HDFS
4. 任务调度，关闭任务，定时以及立即开始执行任务 API
相似人才推荐
-
500元/天技术国企，外企概要：6年技术岗位，参与大型项目开发，并是核心开发人员. 熟悉软件开发流程，熟悉c#语言、JQuery、
-
2000元/天逆向工程师解放军某部概要：熟悉硬件的维修维护，有较强的硬件debug能力 c++，汇编代码还原为源码，windows软件逆向 -
500元/天学生苏州大学概要：会Python，html，爬虫，tcp，udp，一部分机器学习内容，还在学习中，现在是大二学生，专业
-
500元/天学生上海交通大学概要：python 爬虫 ，脚本制作，爬取各类网站图片，视频，文字，按要求格式保存，可将爬虫程序改为界面型
-
600元/天IT外服概要：1、熟练使用C,C++c#,vb等开发语言; 2、熟悉使用asp.net、html、xml、WCF
-
1000元/天高级软件工程师智信精密概要：7年机器视觉行业工作经验，熟练使用C/C++开发语言，熟悉C#，擅长使用MFC/QT/Duilib等
-
1500元/天大数据开发工程师杭州在信科技北京分公司概要：深刻理解Hdfs分布式文件系统存储结构和高可用原理 熟练掌握Hadoop MapReduce计
-
1000元/天算法工程师百度概要：精通python java c 爬虫 算法 微信小程序 公众号开发 web开发 精通
