5年变成经验,精通python 爬虫,熟练使用爬虫数据请求、数据解析库、抓包工具及爬虫框架scrapy,能够解决IP、css、字体、js、验证码等反爬手段,熟悉python web flask、django 框架,有新闻类、电商类web 开发经验,熟悉python numpy 、pandas、pyecharts 数据分析库和数据可视化库,熟悉机器学习回归、分类算法,能够使用sklearn、tensorflow库训练模型.时间充裕.
1.使用opencv 库调取电脑摄像头获取人脸视频,视频分流获取图片,使用requests 模块接入百度AI人脸识别接口,传入图片,使用jsonpath 库对返回数据进行解析,获取人脸信息数据,使用opencv库进行人脸标记,并标记出age、gender、beauty,提取landmarking150 人脸关键点数据 使用PIL 库进行人脸化妆,将人脸上传至百度人脸库,user_id
为各学生姓名,学生可以一键拍摄视频并识别出自己的age、gender、name、beauty and make up
2.使用python scrapy 框架爬取新闻网站,主要有凤凰财经、今日头条、东方财富、新浪财经、腾讯财经、华尔街见闻等新闻网站。获取新闻数据,数据清洗,提取关键字,获取准确的数据存入数据库,供机器学习使用
3.使用requests 模块访问大众点评网站,获取到商家数据之后,使用xpath 解析,存入CSV 表格,使用pandas 模块读取数据,使用pyecharts 将数据展示为柱状图、饼图、折线图,进行数据分析