最近一份工作任职于新浪微博,有 10 年工作经验,熟悉编程语言有PHP, GO, Python 等,主要从事 web 开发及爬虫相关;在微博这7年参与过微博多个大型项目的技术选型和落地实现, 工作上认真负责,工作外热衷开源和研究爬虫相关知识如(自动化, 逆向JS);整体而言是一个热爱工作和生活,面对风雨持有乐观心态的人。
技术栈有如下:
PHP, Go, Python
linux, Nginx, Docker
Mysql, Redis, Tidb, Pika
jquery, bootstrap
go-zero, yaf, Yii,scrapy,colly,gin,gorm
grafana, jeager, prometheus
项目名称: 积分平台
项目介绍: 用户及商户积分数据存储和管理的统一平台
项目特点: 高并发、低延迟、两亿海量用户、日均亿级流量、日均四千万交易
工作内容: 三节保障流量方案制定、容量评估、单体到微服务架构演进及落地实现、核心功能延迟优化、日志采集、监控报警及链路追踪系统搭建、存储引擎演进、模块解耦(go重构发私信模块)等
项目名称: 一元夺宝
项目介绍: 一元购买商品,多人购买商品份数,抽中其中一位即中奖者给予商品
项目特点: 并发高、日交易量大、抽奖算法公平性
工作内容: 设计与落地实现,开发阶段完成主要模块开发(首页,详情,列表)等,运营阶段业务量飞速发展,主导扩容方案设计与落地
项目名称: 天气爬虫系统
项目介绍:国内城市的天气数据的抓取(短时预报、7天预报、云图、生活指数等);
工作内容: 重构由java写的爬虫系统, 采用 scrapy, scrapyd, mysql, redis; 在原有基础上增加云图和生活指数的数据