Tableau、Hadoop 和 Birt

Tableau, Hadoop & Birt

我试图将数据从 SQL 数据库迁移到 Hadoop。我已经通过配置 Hive、HBase 和 Hadoop 成功地做到了这一点。

我的问题是我将 Birt & Tableau 与我的 SQL 数据库一起使用,并且能够在 5-10 分钟内加载 1000 万个数据,但我新配置的 Hadoop、Hive 和 HBase 系统大约需要 50分钟获取 1000 万个条目。 我怎样才能提高这种表现?

Hadoop是专门为海量数据处理而开发的,为什么我做不到?

性能有什么特殊配置吗?

经过大量研究和为了回答这个问题,我也通过了 HDP。然后我遇到一个场景,我们无法将 SQL Db 的性能与 Hadoop 进行比较,因为两者的用途不同。

此外,只有在数据超过几个 TB 的限制后,即 SQL 数据库出现故障时,Hadoop 才会显示其性能。因此,如果应该先检查是否为应用程序会更好。如果对性能有要求,选择Hadoop不是一个好的选择;去 SQL 数据库。但是,如果应用程序将拥有大量数据,则必须对 SQL 数据库失败的如此庞大的数据进行分析;在这种情况下,Hadoop 很流行。