擅长python,django,爬虫,数据处理,自动化脚本
前端熟练css,js,html开发
后端熟悉mysql,sqlite,postgreSql等数据库
有快速独立搭建开发网站经验
大数据组经验hdfs,impala,solr
网站数据查询系统
文档检索系统
运维后台管理系统
有快速独立搭建开发网站经验
大数据组经验hdfs,impala,solr
擅长python,数据处理,爬虫等等 有独立网站开发经验 熟悉mysql,sqlite,postgreSQL等数据库 大数据平台经验 hdfs solr impala等
爬虫代理IP池项目,主要功能为定时采集网上发布的免费代理验证入库, 定时验证入库的代理保证代理的可用性 ,提供API和CLI两种使用方式。同时你也可以扩展代理源以增加代理池IP的质量和数量