Cassandra和apache spark db设计实现datewise filter
Cassandra and apache spark db design to achieve datewise filter
在我的应用程序中,所有实时数据都存储在 cassandra table 中,我计划使用 apache spark 对其进行分析并将其放入不同的 tables 中,这样可以更快地获取数据,我想知道我需要申请哪种设计方法。
分析relatime table在一个时间范围内,然后放入每小时,然后分析到每天,然后每周等......,那么很容易实现日期范围内的数据.我的逻辑是否正确或使用 cassandra 和 spark 的任何其他方法?
我认为您的方法 good.It 类似于 Nathan Marz 设计的 Lambda 架构。有关更多信息,请关注此 link。希望这对您有所帮助。
在我的应用程序中,所有实时数据都存储在 cassandra table 中,我计划使用 apache spark 对其进行分析并将其放入不同的 tables 中,这样可以更快地获取数据,我想知道我需要申请哪种设计方法。
分析relatime table在一个时间范围内,然后放入每小时,然后分析到每天,然后每周等......,那么很容易实现日期范围内的数据.我的逻辑是否正确或使用 cassandra 和 spark 的任何其他方法?
我认为您的方法 good.It 类似于 Nathan Marz 设计的 Lambda 架构。有关更多信息,请关注此 link。希望这对您有所帮助。