熟练掌握Python语言,能够使用Python开发Web应用程序、数据库管理和爬虫系统等。
熟悉各类Python库,如requests、Scrapy、Pandas并能够熟练运用。
具有较好的数据分析和交互可视化能力,能够利用Python进行数据分析预测和利用Matplotlib、Seaborn等库生成各种图表。
具有基础的人工智能知识,了解深度学习基础实现,基于机器学习技术实现相关业务需求。
使用Python编写爬虫程序,定期更新公司相关数据,以支持业务部门的工作需求。
负责数据清洗和处理、数据存储、API开发等方面的工作,确保数据接口稳定可靠。
基于爬虫项目的数据分析,设计各类数据可视化图表,辅助管理部门快速决策。
成就:
成功独立开发了一套稳定工作的爬虫系统,以每天更新50GB以上相关数据,提高了公司业务响应速度,取得了管理部门的一致好评。
读取附件两个记事本里的内容生成本地mp4视频,做个生成视频的程序,实现同类型的网址能生成视频就可以。失败的话显示失败,生成失败日志,成功的在生成一次显示重复,失败的继续,短时间生成一个视频,在5、6分钟之内生成3或者4个小时的视频
功能:为了实时监测新闻动态,然后将新闻定时发送。使用newspaper库中的Article对象来下载新闻的完整内容并提取其中的信息,包括新闻链接,以获取最新的新闻链接。 难点:因为链接实时更新,url很难获取,为了更好解决这个问题,设定一个分钟进行判断是否新文章出现,然后遍历文