北邮计算机技术硕士学位,工作时间8,早期在国企就职,后入职新浪微博机器学习团队,担任大数据研发。
现在与前同事一起进行公司创业,以技术入股,目前作为核心研发,承担公司相关业务。
精通使用python开发,8年的工作经历中, 均以python作为主要开发语言。
擅长数据分析,基于的便利性,擅长复杂数据的清洗处理,数据分析等。
擅长基于python的数据爬虫,承担多个公司多个爬虫项目,熟悉前后端相关知识内容。
擅长大数据研发,基于spark等,熟练使用hive、spark、hdfs、hbase、clickhouse等大数据处理相关框架。
数据分析类:
流量解析工具开发项目、基站位置校验项目、mr数据分析项目、金融短信分析项目、时空轨迹校准项目、公交路线匹配项目等等
爬虫类:
境外100威胁情报网站采集项目、台湾公开法院判决书采集项目、美国公开政府财务数据采集项目、美国政界人物任职数据采集项目、美国代表人物言论数据采集项目、境内OTA平台评论数据采集项目、微信公众号文章采集项目、汽车之家/易车网车系报价数据采集项目
大数据平台:
网络安全平台分析项目、全特征数据整合项目、人物轨迹提取项目、疫情防疫计算项目等等