Twitter Streaming Spark：我可以在流式上下文中使用多少个过滤器关键字？

Question

我正在使用 spark 流上下文在 scala 中使用下面的 api 流式传输 Twitter 数据。 https://spark.apache.org/docs/1.0.0/api/java/org/apache/spark/streaming/twitter/TwitterUtils.html

我想知道我可以给多少个过滤器关键字来创建流媒体功能？。 （下面函数的第三个参数）

TwitterUtils.createStream(ssc,None,keywords)

Twitter API 可以处理多少个过滤关键字。

Answer 1

根据 this question，twitter 似乎不是根据您提供的过滤器数量来限制您的，而是根据您允许使用的总容量来限制您的。似乎限制是推文总数的 %1。

Answer 2

您可以输入一组关键字作为跟踪 twitter 的过滤器，根据当前限制，您最多可以跟踪 400 个关键字。