一个关键字代表一个商品,按关键字搜索推特文章。
1)专门采集推特x.com的文章数据。
2)基于关键字搜索获得推文结果,并实现自动翻页。
3)能够模拟真实用户的数字指纹,避免网站侦测。
4)采集内容:推文ID、阅读量、评论量、点赞量、转发量,推文链接、采集时间。*不需要推文内容,也不需要作者的账户信息。
5)每隔5分钟搜索一次关键字,用于计算传播增量。
6)每天约3万个新关键字,由我方动态提供。
7)每个关键字有效期为48小时,到期自动移除此关键字的采集任务。
8)关键字前期的搜索结果99%是空的,需要一个优化策略。
9)通过接口将数据实时同步给我方。
我方根据采集结果,计算商品的传播增量与衰弱周期,分析商品的传播力。