python爬虫,mysql,linux平台搭建。爬取过https://www.1ppt.com/,https://www.job592.com/doc/who1.html?act=sou&pn=3&order=hot&stu=1等相关模板
在爬取https://www.1ppt.com/网页时,使用了断点续爬,间断爬取网页,储存在本地或者数据库,UA池,代理ip池等相关知识
爬取https://www.1ppt.com/moban/使用了断点续爬,代理IP池,UA池,存储到本地或者数据库
爬取https://www.job592.com/doc/who1.html?act=sou&pn=3&order=hot&stu=1使用了js反反爬技术
爬取https://www.job592.com/doc/who1.html?act=sou&pn=3&order=hot&stu=1使用了js反反爬技术