Apache大数据框架:Apache Hadoop, HBase, ZooKeeper, Hive, Storm, Kafka, Flume, Spark
Python机器学习框架:PyTorch
Python自动化测试:selenium
PythonQQ机器人插件开发部署:Nonebot
bilibili弹幕分析项目,使用Kafka+Storm流处理框架进行消息订阅发布和弹幕分析,可分布式弹性部署,利用Springboot作为前端
PythonQQ机器人项目,利用gocq作为前端,nonebot作为开发后端实现QQ机器人功能,例如定时播报,连接api查询疫情信息,接入图灵等
Python机器学习项目,生成对抗网络,CNN,RNN,LSTM,RL,FL
角色 | 职位 |
负责人 | 大数据开发工程师 |
队员 | 前端工程师 |
队员 | 后端工程师 |
自用插件(确信),项目分为两个分支,main为稳定版本的分支,dev为正在开发的内容 基于Nonebot和gocqhttp开发,现有功能:每日问好、搜题、疫情查询、知乎热榜、图灵等模块
通过抓取视频弹幕信息关键词,生成数据日志,利用数据库存储并使用大数据处理工具进行分析得出关键词的频率及局部密度等等结果,并将分析完毕的数据展示到图表中。 OS: Windows(Development), CentOS7(Deployment) IDE:IntelliJ ID