猿急送>

广州Python兼职程序员

ID：347708

家人们谁懂呀

python工程师

公司信息：
字节跳动

工作经验：
3年

兼职日薪：
500元/8小时

兼职时间：
下班后
周六
周日

所在区域：
广州
天河

技术能力

Python: 精通Python语言，包括Python 3.x的新特性和最佳实践。
Web开发: 熟悉Django和Flask框架，能够快速构建和部署Web应用。
数据分析与科学: 使用Pandas、NumPy等库进行数据处理和分析，具备数据可视化经验。
机器学习: 了解常见的机器学习算法和工具，如Scikit-learn和TensorFlow。
数据库: 熟悉SQL数据库，如MySQL和PostgreSQL，以及NoSQL数据库，如MongoDB。
测试与部署: 编写单元测试和集成测试，熟悉CI/CD流程，如Jenkins和GitLab CI。
容器化与微服务: 使用Docker容器化应用程序，并有微服务架构的开发经验。
版本控制: 熟练使用Git进行版本控制和团队协作

项目经验

分布式存储系统优化

作为主要贡献者，参与优化了一个基于Hadoop分布式存储系统的性能和可扩展性。分析和调优HDFS存储集群的数据写入和读取速度，通过调整数据块大小和副本策略优化存储效率。设计和实施了基于YARN的资源调度策略，提升了作业执行的并行度和整体系统的稳定性。通过监控工具实时跟踪系统性能指标，并提出改进建议以减少资源浪费和提高数据处理吞吐量。这个项目展示了我在大规模数据存储和处理系统优化方面的专业技能和解决复杂技术挑战的能力

实时大数据分析平台

作为核心开发者，参与设计和实现了一个基于Spark和Hadoop的实时大数据分析平台。使用Scala和Python编写Spark作业，处理PB级别的数据集。优化数据处理流程和算法以提高处理效率和准确性，并实现了实时数据流处理功能。通过Kafka和Flume收集和传输数据，确保数据的高可靠性和低延迟。该平台支持复杂的数据挖掘和机器学习任务，为业务决策提供实时洞察。这个项目不仅展示了我的大数据处理技能和分布式系统设计能力，还体现了我在处理实时数据和优化性能方面的深厚经验。