1、精通Python:可以利用 requests 库抓取网页数据,并使用 BeautifulSoup 解析网页,并清晰和精准地快速获取数据。
2、精通SQL:可以轻松应对数据仓库开发,如sql server,Hsql,SPARKsql等数据库开发。
3、精通原型图设计:可以根据项目目标绘制所需原型图
1、爬取电商网站商品数据,并统计分析各品类挂牌情况
2、爬取电商网站和投诉网站的客户评价数据,利用NLP技术提取用户专注的问题及用户情绪
爬取车质网用户评价数据,包含:发布者、品牌、车系、车型、打分、标题、优势、劣势和发布时间数据,并提取其中优势和劣势的关键信息
抓取私域用户的会话数据,并整理成规定的形式,比如将用户发送的图片数据提取出文字,将用户的表情转化为文字。同时对用户的言论进行情感打分