飞雪
全站工程师
- 公司信息：
- 携汇机床产业数字技术研究院（深圳）有限公司
- 工作经验：
- 15年
- 兼职日薪：
- 800元/8小时
- 兼职时间：
- 下班后
- 周六
- 周日
- 可工作日远程
- 可工作日驻场（离职原因）
- 可工作日驻场（自由职业原因）
- 所在区域：
- 深圳
- 宝安
技术能力
作为一名资深的全栈工程师，我拥有深厚的技术背景与丰富的项目经验，专注于产品框架设计搭建、Web后端开发、大数据处理及自动化测试等领域。
在编程语言方面，精通Python、PHP、java，具备使用Flask、Tornado、Django、ThinkPHP、Laravel、Spring等框架开发高性能Web应用的丰富经验。对于前端技术，对流行的框架如Vue有着深入的理解，能够创建响应式、用户体验优秀的网页界面。
在大数据处理领域，精通Hadoop，擅长使用Pandas、Numpy等库进行ETL数据清洗与处理，熟练掌握Hive、Spark等大数据计算框架。熟悉帆软等BI平台，能够为企业提供全面的数据分析解决方案。
数据库操作技能涵盖MySQL、MongoDB，尤其在MySQL的索引优化、查询优化及存储优化等方面积累了宝贵的实战经验。熟悉MQTT消息队列，以及Redis、Kafka、Memcached等分布式缓存技术，有效提升系统的性能与可扩展性。
在Web爬虫开发方面，精通Scrapy框架及分布式爬虫的构建。熟练运用Requests、Selenium、Appium等框架进行数据抓取，并且能够灵活使用Charles、Fiddler等抓包工具。
具备扎实的Linux系统操作能力，能够编写Shell脚本来自动化日常任务，熟悉Git版本控制管理，以及Docker、Kubernetes容器化部署与运维。
项目经验
Mteda数据中台系统
技术栈：python/tornado/mysql/redis/mqtt/pyspark
项目背景：本系统与边缘网关通过mqtt和http进行通讯，统一管理边缘网关的注册、运行、设备数据采集和加密数据传输等功能。数据中台可以管理所有的边缘网关，主动向边缘发生消息，远程管理边缘网关，不同局域网的边缘网关也可以通过本系统进行信息传输和通讯。这样就实现了在不同的地方也可以实现机床等数据的采集，可以实时了解订单的生产状态等。对采集到的大数据，使用pypark进行分布式的计算处理。
工作内容：负责系统架构设计、框架搭建；中期的模块拆解、任务分配；核心模块的代码编写；代码的审核；产品服务器的运维分析优化；
机床刀具寿命分析大数据系统
技术栈：hadoop/python/hive/pyspark/mysql/java/spingboot
项目说明：
由于机床的刀具在切削不同的材料的环境下的使用寿命不确定，这样就可能会在切削材料的时候突然断裂，可能导致损坏贵重的加工材料。所以要对机床的运行数据和各种传感器进行分析，预测刀具即将损坏的情况下，提前进行刀具的更换。
工作内容：
使用hadoop分布式数据库进行大量机床的运行数据和传感器存储，然后使用python进行数据ETL清洗处理，最后就使用hive、spark等框架进行分析计算得到结果存放在mysql。
