客户需求:

在博鳌论坛大会召开期间,采集并分析主流网站上包含关键词的信息数据,实时掌握网络舆情

需求要点:

  • 保证时效性,每天采集分析前一天的数据
  • 文章数据结构化
  • 目标网站包含国外知名网站、媒体

项目难点:

  • 项目工期比较急,需一周内完成
  • 采集频度、效率要求较高
  • 文章结构化需进行语义分析
  • 为了采集国外网站数据,需采购国外的服务器

解决方案:

  1. 支持主流数据源,支持自定义热词
  2. 采集效率高,可及时响应
  3. 拥有美国、香港的云主机,可支持国外网站的内容采集