通过各种专业的省、国家计算机考试有二级计算机、一级计算机考试。可写一级或者二级
2、熟悉各种语言和编程,包括VC++编程,Java语言编程,Pascal语言、汇编语言等。
3、熟悉数据库的基本原理,能够熟练使用SQL sever 2000 VFP创建和管理数据库。
4、熟悉计算机基本原理和计算机网络,能够设计和维护一定规模的网络。
5、熟悉软件工程制作的各个过程,包括立项建议书、需求说明书、概要说明书、详细说明书等报告书以及在软件 的建立过程中包括软件立项、软件策划、软件需求、软件设计、软件建模、软件实现、软件测试、软件发布与实施的各个步骤。其中熟悉软件测试的一些测试工具。
6、熟悉各种操作系统,包括windows 2000 professional and server,windows XP professional,具有一定的操作系统理论,对WindowsNT,Unix,Linux有一定的了解。
7、熟悉网页制作工具---网络三剑客:Fireworks,Dreamwever以及flash的使用。
8、熟悉各类看图工具,懂得用photoshop对图片进行修改。
9、熟悉微软的office软件,特别是Word、Excel的操作和应用。
10、能够写命令、决定、公告、通告、通知、报告、请示等多种行政公文。
11、具备一定的行政管理能力,能够熟练完成行政管理方面的多项事务。
项目时间:2015-12到2011-10
项目名称:通过异步爬虫爬取HGMD,构建mysql数据库
项目描述:
项目介绍
对高通量测序数据进行数据分析时,需要对snp数据进行相关性筛选,为此需要构建基于mysql的基因突变数据库,对HGMD网站相关基因突变信息进行爬取,爬取内容包括基因名,染色体坐标,突变信息,致病信息等。爬取结果存储于mysql。
我的职责
1,采用asyncio+aiohttp以达成高并发,异步请求。
2,通过timeout设置超时重发机制,因为HGMD为国外网站,防止因为网络卡顿导致页面抓取不到产生数据不全的现象。
3,通过继承aiohttp.ClientSession类来保存cookie对象,以应对基于cookie的反扒策略
4,使用xpath进行页面解析,解析出的数据通过PyMysql模块存储于mysql数据库中