如何 运行 在 VSCode 中触发批处理作业
how to run spark batch jobs in VSCode
我正在尝试 运行 在 VS 代码中批处理作业,但我一直收到错误消息,提示我先登录,我不确定为什么。
我的 settings.json 是用我的文件设置的:
{
"hdinsightJobSubmission.ClusterConf": [
{
"name": "Hue: http://xumclu123.td.knv:8998 (franklinm23)",
"filePath": "c:\Users\franklinm23\Spark\HelloWorld.py"
}
],
"python.pythonPath": "C:\Users\franklinm23\.msvscode.hdinsight\hdinsightJupyter\Scripts\python.exe"
}
当我右键单击我的 helloworld.py 时,我得到以下输出:
[2021-1-15:13:54:21] [Info] Set Hive: http://xumclu123.td.knv:8998 as the default job submission cluster!
然后当我右键单击 Spark:PySpark Batch 我得到:
[2021-1-15:13:56:13] [Info] start submitting spark application to cluster Hive: http://xumclu123.td.knv:8998 (franklinm23)
[2021-1-15:13:56:13] [Error] Error: please sign in at first!
我已经尝试了我所有的集群,它们都是 运行ning。我错过了什么?
用户未正确登录。
我正在尝试 运行 在 VS 代码中批处理作业,但我一直收到错误消息,提示我先登录,我不确定为什么。 我的 settings.json 是用我的文件设置的:
{
"hdinsightJobSubmission.ClusterConf": [
{
"name": "Hue: http://xumclu123.td.knv:8998 (franklinm23)",
"filePath": "c:\Users\franklinm23\Spark\HelloWorld.py"
}
],
"python.pythonPath": "C:\Users\franklinm23\.msvscode.hdinsight\hdinsightJupyter\Scripts\python.exe"
}
当我右键单击我的 helloworld.py 时,我得到以下输出:
[2021-1-15:13:54:21] [Info] Set Hive: http://xumclu123.td.knv:8998 as the default job submission cluster!
然后当我右键单击 Spark:PySpark Batch 我得到:
[2021-1-15:13:56:13] [Info] start submitting spark application to cluster Hive: http://xumclu123.td.knv:8998 (franklinm23)
[2021-1-15:13:56:13] [Error] Error: please sign in at first!
我已经尝试了我所有的集群,它们都是 运行ning。我错过了什么?
用户未正确登录。