本人擅长 Python 开发,精通 shell 脚本工具,对 docker 和 k8s 容器技术有深入理解。熟练掌握 pytorch、sklearn 等 AI 框架,能够进行数据处理、网页爬虫和图像识别等开发工作。具备大模型部署经验,在 prompt 调优等方面有着丰富的实践经验。
网络数据采集工具
使用 Python 及其丰富的爬虫库(如 BeautifulSoup、Scrapy 等)来实现网络爬虫。通过发送 HTTP 请求、解析 HTML 或 XML 等网页数据,提取有价值的信息,并将其存储到本地或数据库中。