ID:350905

嘉.

Python工程师,数据工程师

  • 公司信息:
  • 深圳市分期乐网络科技有限公司
  • 工作经验:
  • 7年
  • 兼职日薪:
  • 700元/8小时
  • 兼职时间:
  • 下班后
  • 周六
  • 周日
  • 可工作日远程
  • 所在区域:
  • 深圳
  • 南山

技术能力

有着7年开发经验!
1、熟练使用 Python,JAVA、Grovvy 具备良好编码习惯;
2、熟悉多线程,多进程,协程优化数据处理;
3、熟悉 MySQL、Oracle、StarRocks 了解 Redis 数据库,对 sql 优化有一定了解;
4、熟练掌握 Linux 操作系统,包括但不限于命令行操作、系统配置、软件安装与管理、脚本编写等;
5、熟悉使用 Git 进行版本控制和团队协作;
6、独立设计 API 接口并熟悉使用 Postman 进行 API 调试;
7、熟悉常见网站架构,对 MVC 、前后端分离架构有深刻理解;
8、熟悉 Xpath、BeautifulSoup,Selenium 等爬虫工具的使用;
9、了解 Nginx 部署和应用;
10、了解常用的数据结构以及算法;
11、了解后端常用组件【Celery、FastDFS】;
12、熟悉大数据平台 Hadoop 生态系统及部分相关组件,如 HDFS、
13、MapReduce、Hive、Yarn 等;
14、熟悉 ETL 工具如 Kettle ,可对数据进行清洗、转换、加载等操作。

项目经验

一、智能数据分析平台建设
项目描述:充分利用数据资产,提高决策效率和业务洞察力,我们启动了智能数据分析平台建设项目。该项目旨在构建一个先进的分析平台,通过整合和分析大量数据,为公司提供实时、准确的决策支持。
项目职责:
● 实施 ODS 层的数据模型,确保数据结构能够满足业务需求和性能要求;
● 监控 ODS 层的数据质量,定期进行数据清洗和错误修正;
● 实施 STD 层的数据模型,确保数据标准化和一致性;
● 维护 STD 层的数据字典和元数据,确保数据的易理解性和可追溯性;
● 开发和优化 ETL 脚本,提高数据处理效率和可靠性;
● 监控 ETL 作业的执行情况,及时发现并解决数据同步问题;
● 定期回顾和评估 ETL 流程,提出改进方案以应对业务发展和技术变革;
● 与业务分析和数据科学团队紧密合作,确保数据仓库的设计和维护工作与公司整体战略保持一致。

二、OA系统风险报表开发
项目描述:根据风控需求完成 FPD 首逾及 vintage 逾期监控报表、当前逾期监控报表、业务漏斗转化报表、风险监控等报表开发,以提高风控同事效率。
项目职责:
● 分析和理解风控部门的需求,确定开发 OA 系统风险报表的功能和特性。
● 设计和实施 OA 系统中与风险报表相关的数据库结构并与 MySQL 进行集成。
● 使用 Python和 Java 开发报表生成和数据处理的功能模块。
● 实现与业务系统的数据对接和数据传输功能。
● 编写高质量的代码,进行单元测试和集成测试,确保系统的稳定性和可靠性。
● 解决开发过程中出现的问题并与团队成员进行协作,保证项目按时交付。
● 与用户和风控同事密切合作,收集反馈并及时进行改进和优化。
技术描述:
● 使用 Python 语言开发报表生成和数据处理的功能模块。利用 Python 的强大的数据处理和分析库 pandas、pyMysql、DBunit 等来实现数据的提取、清洗、转换和分析。
● 使用 Java 语言开发与 OA 系统的其他模块进行集成的功能。通过 Java 的面向对象特性和丰富的 Spring,MyBatis 实现系统的扩展和灵活性。
● 使用 MySQL 作为 OA 系统的后端数据库,设计和实施与风险报表相关的数据库结构。利用 MySQL 的高性能和稳定性,确保数据的安全和可靠。
● 针对报表生成和数据处理的性能和效率进行优化,使用合适的算法和数据结构,提高系统的响应速度和处理能力。
● 使用 Postman 对接口进行调试,确保应用功能展示。
● 遵循良好的软件工程实践,使用如 Git 进行代码管理,并编写清晰、可维护的文档。

案例展示

  • 智能数据分析平台建设

    智能数据分析平台建设

    项目描述:充分利用数据资产,提高决策效率和业务洞察力,我们启动了智能数据分析平台建设项目。该项目旨在构建一个先进的分析平台,通过整合和分析大量数据,为公司提供实时、准确的决策支持。 项目职责: ● 实施 ODS 层的数据模型,确保数据结构能够满足业务需求和性能要求; ● 监

  • OA系统风险报表开发

    OA系统风险报表开发

    项目描述:根据风控需求完成 FPD 首逾及 vintage 逾期监控报表、当前逾期监控报表、业务漏斗转化报表、风险监控等报表开发,以提高风控同事效率。 项目职责: ● 分析和理解风控部门的需求,确定开发 OA 系统风险报表的功能和特性。 ● 设计和实施 OA 系统中与风险报

  • 风控变量衍生与数据处理

    风控变量衍生与数据处理

    、风控变量衍生与数据处理 项目描述:根据各大银行的征信报告数据,通过解析、处理和衍生变量,为公司的风控策略制定提供支持。 项目职责: ● 深入研究和理解各大银行(包括人行和平安银行)的征信报告数据结构、字段定义和关联关系。 ● 使用 Python和 Groovy 编程语言

查看案例列表(含更多 0 个案例)

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0
微信扫码,建群沟通

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服