跨 R 和 Scala 脚本访问数据

Access data across R and Scala scripts

假设两个脚本 运行 针对同一个 Spark 集群,是否可以跨 R 和 Scala 脚本共享数据?例如,我想使用 Scala 从源系统中提取数据,并且我想在 R 中访问这些数据而不必保留它。

我试过使用 registerTempTable 将数据保存在内存中,但我似乎无法在另一个脚本中访问它。

无法做到这一点(在任何会话之间)。您应该将数据写入磁盘。 (高清文件系统等)