自学python多年,熟练使用python爬虫,做过多个项目, 熟练使用scrapy框架,熟练解决爬取中遇到的各种问题, 做过分布式, 增量式, 遇见过多种反爬机制, 能运用各种反反爬手段,
英语:顺利通过CET-4考试,能顺利阅读各种英文科技文献和文档,能进行日常的英语对话交流。
数据库(redis、Mysql)、SQL语句:基本掌握,能进行正常的增、删、改、查 。
操作系统Linux/Unix等:基本了解,掌握linux上面的基本命令,有过半年的linux经验。
其他语言:掌握C/C 语言,从C 转型到python,了解其他动态语言。
爬取bilibili视频网站,selenium自动登录, 绕过验证码反爬机制, 运用scrapy框架,简单爬取数据到服务器,
爬取图片,视频,小说等网站, 熟练使用selenium,进行动态化加载, 使用scrapy框架,简单爬取各大网站
熟悉爬取各大小说,图片, 视频网站, 能绕过各种反爬机制, 能使用selenium动态加载, 使用scrapy进行各大网站的爬取