通过其余的 --files 启动数据处理作业 API
Launch a dataproc job with --files through the rest API
我可以通过命令行向 dataproc 提交作业
gcloud dataproc jobs submit pyspark --cluster=my_cluster --region=myregion --py-files file1.py script.py
我想将此命令行转换为 POST 对其余 api、https://cloud.google.com/dataproc/docs/guides/submit-job
的请求
但是我无法理解如何设置
--py-files file1.py
请求中的参数。有人可以帮助我吗?
我发现这可以通过
实现
"pythonFileUris": [
"gs://file1.py"
我可以通过命令行向 dataproc 提交作业
gcloud dataproc jobs submit pyspark --cluster=my_cluster --region=myregion --py-files file1.py script.py
我想将此命令行转换为 POST 对其余 api、https://cloud.google.com/dataproc/docs/guides/submit-job
的请求但是我无法理解如何设置
--py-files file1.py
请求中的参数。有人可以帮助我吗?
我发现这可以通过
实现 "pythonFileUris": [
"gs://file1.py"