进行实时数据分析的最佳方式
Best way to do real time data analytics
我目前对使用实时飞机性能数据进行实时数据分析感兴趣预测分析。可以使用哪些工具和技术在研究层面实施这样的系统?
对于实时数据分析,如果我处在你的位置,我会选择以下技术
1) 用于实时数据摄取的 Kafka。
2) 用于流式处理的 Spark Streaming
3) 使用机器学习算法的 Spark ML(预测)
4) 用于可视化的 Apache Zeppelin。
5) 您可以根据需要使用 Hive 或 HDFS 的数据存储
6) 用于性能监控的 Ganglia
希望对您有所帮助!!!...
我目前对使用实时飞机性能数据进行实时数据分析感兴趣预测分析。可以使用哪些工具和技术在研究层面实施这样的系统?
对于实时数据分析,如果我处在你的位置,我会选择以下技术
1) 用于实时数据摄取的 Kafka。
2) 用于流式处理的 Spark Streaming
3) 使用机器学习算法的 Spark ML(预测)
4) 用于可视化的 Apache Zeppelin。
5) 您可以根据需要使用 Hive 或 HDFS 的数据存储
6) 用于性能监控的 Ganglia
希望对您有所帮助!!!...