Azure Databricks SQL 下载查询结果
Azure Databricks SQL download query results
我是 Databricks 的新手。我在笔记本中有一个 SQL 查询,我想将完整结果(大约 3000 行)下载到一个 CSV 文件中。但是,当我 运行 查询时,显示前 1000 行需要半小时(这对我没用),然后我必须单击“下载完整结果”,这会重新 运行 s query, 刚才的半个小时就这样浪费了。
有没有一种方法可以在不首先在浏览器中显示前 1000 行的情况下下载完整结果?
这可能会有所帮助 -
创建 1 个变量并将 table 加载到变量中
我的table = spark.table("table姓名")
然后使用类似的选项将数据存储到 csv 文件中
Mytable.write.format("com.databricks.spark.csv").option("分隔符", "根据您的要求").option("header", "true").save("dbfs:/df/mytabledata .csv")
然后就可以download/access数据砖实例文件系统下的文件了
我是 Databricks 的新手。我在笔记本中有一个 SQL 查询,我想将完整结果(大约 3000 行)下载到一个 CSV 文件中。但是,当我 运行 查询时,显示前 1000 行需要半小时(这对我没用),然后我必须单击“下载完整结果”,这会重新 运行 s query, 刚才的半个小时就这样浪费了。
有没有一种方法可以在不首先在浏览器中显示前 1000 行的情况下下载完整结果?
这可能会有所帮助 - 创建 1 个变量并将 table 加载到变量中 我的table = spark.table("table姓名")
然后使用类似的选项将数据存储到 csv 文件中 Mytable.write.format("com.databricks.spark.csv").option("分隔符", "根据您的要求").option("header", "true").save("dbfs:/df/mytabledata .csv")
然后就可以download/access数据砖实例文件系统下的文件了