掌握Python技术相关开发,
熟练掌握内置模块和导入第三方模块
熟练使用Ubuntu16.04LTS,掌握常用的Linux命令
熟练MySQL和MongoDB数据库,能够熟练使用sql语句,实现数据库的增删改查
熟练flask,django框架以及html、css、js、jQuery等web前端技术 熟练Scrapy爬虫框架,
熟练使用Xpath、BeautifulSoup、re进行数据提取 熟练数据结构和一些基本的排序算法
掌握基于协同过滤的智能推荐算法 了解高性能计算机数据分析库numpy和matplotlib绘图库
项目名称:财富鑫手指金融信息网
开发环境:Ubuntu16.04
开发工具:pycharm spyder3
技术实现:Mysql、Echarts、threading、multiprossing、Twilio、Django、MongoDB,tushare, TensorFlow
项目描述:网站旨在服务股民对新闻的阅读还有数据指标线的智能分析与推送。因为人工智能维度 低的原 因采用分析师与人工智能共同合作给出建议的体质,分析师通过后台传输文件供客户学习 网站搭载 Django 框架,通过 Tushare 模块得到上司公司基本信息还有数据,通过 TensorFlow 数据分析由前段通过 Echarts 渲染成分析类图展示在前段。通过 Xpath+re+selenium 爬取新闻 数据保存在数据库。
职责描述:负责:Django视图的编辑开发 1、使用mysql对数据库来存储信息管理 2、短信云通讯发送接口封装 3、通过 Spyder+requests+Xpath+re+Matplotlib+BeautifulSoup+threading 爬取新闻资讯
项目收获:更深了解到数据库应用和表关系的创建,网络爬虫 Matplotlib 的应用,清楚面向对象 数据的 的封装好处,了解多线程爬虫的开发和爬取效率