熟练掌握分布式缓存、分布式锁、消息队列等分布式技术,具备微服务架构设计和升级能力;
精通 Java 语言,熟练使用 JUC 包,对主流前后端框架有深入理解和应用经验,后端如 SpringMVC、Springboot、Dubbo、
Mybatis 等,前端如 JQuery、Vue、Jsp、Html、Bootstrap 等;
熟悉 Redis、Kafka、MySQL、Elasticsearch、 HBASE、HIVE 等中间件,以及 Jenkins、Sonar、Git 等工具;
另外对大数据技术诸如 spark、Hadoop 也有深刻 的理解和使用经验;
风控大数据:
项目描述:通过大数据平台对业务进行数据采集、清洗、处理等操作,实现业务的数据化、数据服务化、服务业务化; 项目职责: 系统开发: 利用大数据平台,采集自有数据和三方数据并进行数据处理,为风控模型提供数据支撑;利用 spark 进行数据拉链、用户画像、社交网络等功能开发,反哺风控规则为其提供决策接口; 任务监控:为了解决任务脚本执行失败不能及时处理的问题,通过对 azkaban 数据库表定时扫描的方式做状态监控;
交管大脑:
交通大脑的目标是为交警提供智慧服务,大脑共分为数据引擎、AI 引擎和模型库三个部分。 我负责数据引擎的 ETL 平台部分,本平台的目的是为了实现将交通、交管数据进行数据汇聚到交管大脑,并提供数据在 整个数据生命周期中的数据在存储间迁移的能力。
交通大脑的目标是为交警提供智慧服务,大脑共分为数据引擎、AI 引擎和模型库三个部分。 我负责数据引擎的 ETL 平台部分,本平台的目的是为了实现将交通、交管数据进行数据汇聚到交管大脑,并提供数据在 整个数据生命周期中的数据在存储间迁移的能力。
该平台是互联网金融信贷风险控制系统,实现对借款人多方位风险评估、风险识别、审核、贷后监控催收等;大数据部分涉及数据采集、处理、可视化等。