ID：282406
李元鹏l
python工程师
- 公司信息：
- 同略信息科技有限公司
- 工作经验：
- 1年
- 兼职日薪：
- 500元/8小时
- 兼职时间：
- 可工作日远程
- 可工作日驻场（离职原因）
- 所在区域：
- 广州
- 海珠
技术能力
Python语言基础：掌握Python脚本、Python界面编程能力、掌握数据库、掌握基本爬虫、掌握多线程多进程开发能力，能胜任基本的Python开发工作。
二、Pythonweb开发：掌握前端知识、掌握Python三大后端框架、独立开发网站，能胜任web全栈开发工作。
三、Python爬虫：掌握Python爬虫技术、掌握多线程爬虫技术、掌握分布式爬虫技术，能胜任爬虫工作。
四、Python数据分析：掌握Python数据分析、掌握Python数据可视化、掌握Python机器学习，能胜任数据分析和人工智能工作。
项目经验
项目名称：通过异步爬虫爬取HGMD，构建mysql数据库
项目描述：
项目介绍
对高通量测序数据进行数据分析时，需要对snp数据进行相关性筛选，为此需要构建基于mysql的基因突变数据库，对HGMD网站相关基因突变信息进行爬取，爬取内容包括基因名，染色体坐标，突变信息，致病信息等。爬取结果存储于mysql。
我的职责
1，采用asyncio+aiohttp以达成高并发，异步请求。
2，通过timeout设置超时重发机制，因为HGMD为国外网站，防止因为网络卡顿导致页面抓取不到产生数据不全的现象。
3，通过继承aiohttp.ClientSession类来保存cookie对象，以应对基于cookie的反扒策略
4，使用xpath进行页面解析，解析出的数据通过PyMysql模块存储于mysql数据库中
相似人才推荐
-
500元/天python无概要：python会基础，C++会一些基础的算法，Java中会springboot及springMVC框架
-
1000元/天python开发工程师广州致远科技有限公司概要：主语言：python开发通吃，如：爬虫、web开发、数据分析、AI识别。 副语言：java Web
-
1000元/天全栈高级工程师360doc概要：1、13年互联网开发经验、擅长web全栈开发，小程序开发，鸿蒙next开发、python爬虫、pyt
-
1000元/天Python全栈工程师腾讯概要：后端框架：Django, Flask, Tornado 前端框架：Vue, React, jQue -
500元/天python高级工程师苏宁、中国系统概要：熟练掌握 Python 编程，Linux 命令及操作，有良好的编程习惯; 会编写常用的 shell
-
500元/天Python开发工程师江苏货同宝科技有限公司概要：1．熟练掌握Python和SQL相关知识，具备良好的面向对象编程和面向函数思想，并熟悉常用的设计模式
-
500元/天python爬虫工程师一面数据概要：熟练掌握python的基础语法和面向对象。 熟练mysql常用的dql
-
500元/天python开发工程师珠海格力电器股份有限公司概要： 1.熟练面向对象编程思想，熟悉Java，python，c等基础编程语言。 2.精
