精通python ,对常见的开源库及开发框架熟练掌握 熟悉同步/异步网络编程模型
熟悉Linux开发环境,会使用常见的Linux指令;熟悉flask框架,mysql/redis/mongo等常用组件;熟悉常见的数据结构和算法
熟悉主流爬取技术及爬虫框架工具,如Selenium/Puppeteer/Scrapy/PhantomJS等;
熟悉Python/Java/Go/C++其中一种语言,具备扎实的编码能力;
熟悉常见反爬封禁策略,并具备相关的实战经验;
豆瓣影评书评采集
京东商品采集
当当商品采集
亚马逊商品采集
微博评论采集
唯品会商品采集
百度咨询采集
凤凰资讯采集
人民网新闻采集