ID:109845

史亚州

数据挖掘工程师

  • 公司信息:
  • 北京数据力量信息技术有限公司
  • 工作经验:
  • 2年
  • 兼职日薪:
  • 500元/8小时
  • 兼职时间:
  • 周六
  • 周日
  • 所在区域:
  • 北京
  • 全区

技术能力

熟悉python,java,精通爬虫,mapreduce,spark,数据挖掘与分析。
掌握postgresql,mysql,redis等数据库。
1 网络爬虫技能:熟悉python爬虫,熟悉网页抓取原理及技术,熟悉各种网页解析的策略和算法,熟悉基于正则表达式、XPath等网页信息抽取技术,熟悉基于Cookie的网站登录原理。熟悉多进程应用。
2 大数据相关技能:熟悉hadoop,mapreduce处理数据原理及相关技术,熟悉机器学习算法。
3 数据库: 熟悉postgresql,mysql,redis等数据库的操作。

项目经验

1 爬虫方面:汽车之家全网用户信息的爬取,负责采集汽车之家全网的用户信息,其中使用多进程提高爬虫的效率,使用postgresql数据库储存。另外还有豆瓣,乐视等影评的数据采集。
2 使用mapreduce处理电信的原始数据,分析用户搜索词的热词。

信用行为

  • 接单
    0
  • 评价
    0
  • 收藏
    0

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在1小时内与您联系,1小时内精准确定人才

微信接收人才推送

关注猿急送微信平台,接收实时人才推送

接收人才推送
联系需求方端客服
联系需求方端客服