ID：237563
🖤
爬虫工程师
- 公司信息：
- 北京乐人行有限责任公司
- 工作经验：
- 2年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 周六
- 周日
- 可工作日远程
- 所在区域：
- 北京
- 海淀
技术能力
1.Python中8种数据类型的精通使用
2.Python匿名函数、列表推导式、装饰器的熟练使用
3.Python中re、requests、beautifulSoup等库的熟练使用
4.Python爬虫框架Scrapy的熟练使用
5.Python爬虫伪装中代理IP、UserAgent的熟练使用
6.Python与scrapyt-redis分布式爬虫的基本使用
7.Python操作Mysql数据库增删改查
8.Python操作MongoDB数据库增删改查
9.Python建立数据库连接池提高效率
10.团队协作开发工具git的熟练使用
11.熟悉Linux日常工作环境，熟练掌握常用命令和调优监控手段
12.python机器学习库scikit-learn库的熟练使用
13.python科学计算库numpy、scipy和数据分析库pandas的熟练使用
项目经验
1.基于Selenium的12306自动刷票软件
2.基于Scrapy爬取伯乐在线网站存入mysql数据库
3.基于GradientBoosting模型的厦门市房价预测系统
案例展示
-
分布式爬取京东
本程序采用了scrapy_redis分布式框架，可以部署在linux和docker上，爬取完毕后继续用pyecharts进行数据分析的图形化呈现
-
分布式爬取当当
分布式scrapy_redis爬取当当网，对当当网全网进行爬取，在完成以后对已爬取的数据进行数据清洗后将数据可视化
-
分布式爬取当当
分布式scrapy_redis爬取当当网，对当当网全网进行爬取，在完成以后对已爬取的数据进行数据清洗后将数据可视化
相似人才推荐
-
1500元/天后端架构中通快递概要：可进行 iOS Android Web等前端开发 熟练掌握Golang Java 后端架构设计及开
-
500元/天软件工程师卓创资讯概要：有6年开发经验，精通.net网站开发，可熟练搭建网站前后端框架，熟练使用html5+css3，精通J -
500元/天技术总监深圳佰鑫网络科技有限公司概要：后端技术： - 语言PHP （框架包含但不限于 ThinkPHP、Laravel、Hyperf、Y
-
500元/天软件开发工程师华为概要：深刻理解.NET架构，精通C#，WinFrom，Socket, 多线程和委托，WebAPI，MVC等
-
500元/天Pythom后端开发工程师SHEIN深圳研发中心概要：主要技能栈为Python后端开发，使用Python 4年以上，有个人爬虫项目经验 英语：CET4
-
500元/天应用开发工程师朗新科技股份有限工资概要：1熟练掌握java语言基础，常用类，面向对象编程，IO流，集合的使用。 2熟练的使用过mybati
-
500元/天大数据开发工程师新迈尔科技有限公司概要：具备主流大数据技术栈包括但不限于以下技术 hadoop，hive，spark，flink，kafk
-
700元/天技术部主管杭州尽猎科技有限公司概要：精通php开发； 熟悉Java，Python； 能看懂asp，c/c++代码 熟悉前端html
