所处公司大数据项目组,主要负责日志接入、日志解析、可视化等功能设计和开发。
对大数据常用的第三方组件有一定的使用和问题排查经验。
熟悉常用的Linux命令
技术点:redis、elasticsearch、mysql、kafka、zookeeper、clickhouse、echarts、jquery、vue、css、jsp等
1、企业态势(大数据产品)
通过接受各个厂商设备日志、系统日志、web日志、流量日志等。对日志进行解析标准化,从中提取存在隐患的日志,解析出对应的ip、所在地址、潜在威胁。对客户系统、网站等资产起到监控作用,及时发现存在漏洞、隐患、攻击来源等并及时进行修复和采取相应的防护措施。并对这些数据进行归类、统计展示成图表、地图炮等可视化效果。
在项目中负责日志接入、日志解析、可视化开发、相应资产模块、画像的设计和开发。
涉及相关技术点:redis、elasticsearch、mysql、kafka、zookeeper、clickhouse、echarts
2、云眼(云计算产品)
针对企业中存在大量服务器进行统一的云端管理
项目中主要负责云端的开发,如云端下发指令、下发配置等功能的开发。
涉及相关技术点:hbase、mysql、redis
角色 | 职位 |
负责人 | 高级java开发工程师 |
队员 | 安卓工程师 |
队员 | 后端工程师 |
角色:java开发工程师 负责数据的接入、解析和入库,对数据进行提取分析出相关存在攻击和威胁的日志并产生告警。对数据进行统计分析、展示成可视化图标或地图炮等
角色:java开发工程师 主要模块:云端下发配置、云端可视化统计展示、客户端上报信息解析、项目架构改造 涉及技术点:redis、vue、echerts、springboot、springmvc