如何通过 OpenDAP 使用 xarray 打开多个 NetCDF 文件?
How to open multiple NetCDF files with xarray via OpenDAP?
我正在尝试使用 xarray.open_mfdataset()
打开 THREDDS 服务器上托管在 OpenDAP 上的多个 NetCDF 文件,但出现错误。如果我只打开一个文件(但仍然有 open_mfdataset()
),它可以工作,如果我打开两个,它就没有。
例如,这很好用:
import xarray as xr
chunks = {'time' : 1, 'depth' : 1}
paths = [
'http://thredds.met.no/thredds/dodsC/fou-hi/norkyst800m-1h/NorKyst-800m_ZDEPTHS_his.an.2017022000.nc',
]
d = xr.open_mfdataset(paths, chunks = chunks)
虽然这不是:
import xarray as xr
chunks = {'time' : 1, 'depth' : 1}
paths = [
'http://thredds.met.no/thredds/dodsC/fou-hi/norkyst800m-1h/NorKyst-800m_ZDEPTHS_his.an.2017022000.nc',
'http://thredds.met.no/thredds/dodsC/fou-hi/norkyst800m-1h/NorKyst-800m_ZDEPTHS_his.an.2017022100.nc',
]
d = xr.open_mfdataset(paths, chunks = chunks)
我在 jupyter notebook 中 运行 这个,我在 notebook 中没有得到任何输出,它只是保持 运行,而在终端中它打印以下内容
CURL Error: Failed initialization
curl error details:
CURL Error: Failed initialization
CURL Error: Failed initialization
CURL Error: Failed initialization
syntax error, unexpected WORD_WORD, expecting SCAN_ATTR or SCAN_DATASET or SCAN_ERROR
context: !�zF^@L������@L�Ы�J�@L�y@L�G`Lp@L�X�ڭ@L�/��a@L���@L��{�:@@L�Hl�D@L���i@L�f���@L�>����@L�x��f@L��DA�h@L�����@L��ڭ�M@L�u���@M
CURL Error: Failed initialization
curl error details:
CURL Error: Failed initialization
CURL Error: Failed initialization
syntax error, unexpected WORD_WORD, expecting $end
context: Dataset { Structure { Float64 lon[Y = 902][X = 2602]; } lon;} fou-hi/norkyst800m-1h/NorKyst-800m_ZDEPTHS_his.an.2017022100.nc;Data^:
CURL Error: Failed initialization
CURL Error: Failed initialization
CURL Error: Failed initialization
syntax error, unexpected WORD_WORD, expecting SCAN_ATTR or SCAN_DATASET or SCAN_ERROR
context: �@��&��D^@�h�N�{@��I$�@B�
从那以后,它只会退化为打印更多垃圾。
这不是应该工作得很好吗?
编辑:
之前并不知道,原来netCDF4库也支持将多条路径作为一个数据集打开。我不确定这是否相关,因为我不知道 xarray 和 netCDF4 是否使用相同的后端,但无论如何,以下工作正常。至少这表明问题不在服务器端。
import netCDF4 as nc
d = nc.MFDataset([
'http://thredds.met.no/thredds/dodsC/fou-hi/norkyst800m-1h/NorKyst-800m_ZDEPTHS_his.an.2017022000.nc',
'http://thredds.met.no/thredds/dodsC/fou-hi/norkyst800m-1h/NorKyst-800m_ZDEPTHS_his.an.2017022100.nc',
])
这对我来说似乎是某种错误——您正确使用了 API 并且没有内在原因导致它不起作用。但我不知道哪个系统出了问题——很可能是 netCDF-C OpenDAP reader 或远程 OpenDAP 服务器。
我正在尝试使用 xarray.open_mfdataset()
打开 THREDDS 服务器上托管在 OpenDAP 上的多个 NetCDF 文件,但出现错误。如果我只打开一个文件(但仍然有 open_mfdataset()
),它可以工作,如果我打开两个,它就没有。
例如,这很好用:
import xarray as xr
chunks = {'time' : 1, 'depth' : 1}
paths = [
'http://thredds.met.no/thredds/dodsC/fou-hi/norkyst800m-1h/NorKyst-800m_ZDEPTHS_his.an.2017022000.nc',
]
d = xr.open_mfdataset(paths, chunks = chunks)
虽然这不是:
import xarray as xr
chunks = {'time' : 1, 'depth' : 1}
paths = [
'http://thredds.met.no/thredds/dodsC/fou-hi/norkyst800m-1h/NorKyst-800m_ZDEPTHS_his.an.2017022000.nc',
'http://thredds.met.no/thredds/dodsC/fou-hi/norkyst800m-1h/NorKyst-800m_ZDEPTHS_his.an.2017022100.nc',
]
d = xr.open_mfdataset(paths, chunks = chunks)
我在 jupyter notebook 中 运行 这个,我在 notebook 中没有得到任何输出,它只是保持 运行,而在终端中它打印以下内容
CURL Error: Failed initialization
curl error details:
CURL Error: Failed initialization
CURL Error: Failed initialization
CURL Error: Failed initialization
syntax error, unexpected WORD_WORD, expecting SCAN_ATTR or SCAN_DATASET or SCAN_ERROR
context: !�zF^@L������@L�Ы�J�@L�y@L�G`Lp@L�X�ڭ@L�/��a@L���@L��{�:@@L�Hl�D@L���i@L�f���@L�>����@L�x��f@L��DA�h@L�����@L��ڭ�M@L�u���@M
CURL Error: Failed initialization
curl error details:
CURL Error: Failed initialization
CURL Error: Failed initialization
syntax error, unexpected WORD_WORD, expecting $end
context: Dataset { Structure { Float64 lon[Y = 902][X = 2602]; } lon;} fou-hi/norkyst800m-1h/NorKyst-800m_ZDEPTHS_his.an.2017022100.nc;Data^:
CURL Error: Failed initialization
CURL Error: Failed initialization
CURL Error: Failed initialization
syntax error, unexpected WORD_WORD, expecting SCAN_ATTR or SCAN_DATASET or SCAN_ERROR
context: �@��&��D^@�h�N�{@��I$�@B�
从那以后,它只会退化为打印更多垃圾。
这不是应该工作得很好吗?
编辑:
之前并不知道,原来netCDF4库也支持将多条路径作为一个数据集打开。我不确定这是否相关,因为我不知道 xarray 和 netCDF4 是否使用相同的后端,但无论如何,以下工作正常。至少这表明问题不在服务器端。
import netCDF4 as nc
d = nc.MFDataset([
'http://thredds.met.no/thredds/dodsC/fou-hi/norkyst800m-1h/NorKyst-800m_ZDEPTHS_his.an.2017022000.nc',
'http://thredds.met.no/thredds/dodsC/fou-hi/norkyst800m-1h/NorKyst-800m_ZDEPTHS_his.an.2017022100.nc',
])
这对我来说似乎是某种错误——您正确使用了 API 并且没有内在原因导致它不起作用。但我不知道哪个系统出了问题——很可能是 netCDF-C OpenDAP reader 或远程 OpenDAP 服务器。