ID：181524
～～～～哬🔯
爬虫工程师
- 公司信息：
- 一路捞
- 工作经验：
- 4年
- 兼职日薪：
- 600元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 所在区域：
- 北京
- 海淀
技术能力
了解什么是Hash，会使用简单的MD5,SHA1等算法对数据进行Hash以便存储；
熟悉HTTP,HTTPS协议的基础知识,了解GET，POST方法,了解HTTP头中的信息，包括返回状态码，编码，user-agent，cookie，session等；
能设置User-Agent进行数据爬取，设置代理等；
知道什么是Request，什么是Response，会使用Fiddler, Wireshark等工具抓取及分析简单的网络数据包；对于动态爬虫，要学会分析Ajax请求，模拟制造Post数据包请求，抓取客户端session等信息，对于一些简单的网站，能够通过模拟数据包进行自动登录；
对于比较难搞定的网站，学会使用浏览器+selenium抓取一些动态网页信息；
并发下载，通过并行下载加速数据抓取；多线程的使用；
项目经验
大众点评、汽车之家等 字体破解
新闻网站，各种反爬技术的破解
抖音视频的Header设置破解
量级大的数据采用框架、多线程抓取
相似人才推荐
-
500元/天软件实施工程师上海联影医疗科技有限公司概要：数据库：MySQL，SqlServer 操作系统：Linux 语言：shell，Pyth
-
500元/天软件工程师上海申腾信息技术有限公司概要：掌握C#后台设计,JS网页逻辑处理、特效展示,HTML,CSS,SQL server设计开发,少量C
-
500元/天爬虫工程师北京概要：python、redis、MongoDB、MySQL、scrapy等 python、redis、M
-
600元/天NLP研发工程师个人概要：1、熟悉python、sql、java SE、java web开发； 2、掌握深度学习理论，熟悉C
-
500元/天学生山东劳动职业技术学院概要：我们是专业的数字孪生团队，团队包含建模 unity ue 产品 项目，流程都很成熟 目前落地的项目
-
500元/天软件工程师深圳优仕康通信有限公司概要：从事通信行业，熟悉SIP协议、TCP/UDP/http通信协议,熟练掌握JSON和xml，熟悉sql
-
500元/天高级软件工程师品高软件概要：具备良好的基础，熟练掌握计算机硬件、操作系统原理，可解决网络相关的问题。 9年.NET经验，包括W
-
800元/天高级爬虫工程师Akulaku概要：定制化爬虫平台开发维护 擅长应对各种反爬，包括字体反爬，ip反爬，验证码，js反爬。 精通js逆
微信接收人才推送
关注猿急送微信平台，接收实时人才推送
接收人才推送
联系需求方端客服