Python Pandas 来自 API JSON 响应的数据帧 >>

Question

我是Python的新手，请问这里有高手帮忙吗？

我希望根据 https://api.cryptowat.ch/markets/summaries JSON 响应构建数据框。基于以下筛选条件

Kraken 列出的货币对（请注意，有我不想要的 kraken 期货）
仅与美元配对的货币，即 aaveusd、adausd....

我正在寻找的理想数据框是（不知何故 excel 加载这个 json 下面完美的截图） Dataframe_Excel_Screenshot

resp = requests.get(https://api.cryptowat.ch/markets/summaries) kraken_assets = resp.json() df = pd.json_normalize(kraken_assets) print(df)

输出：

result.binance-美国:aaveusd.price.last result.binance-美国:aaveusd.price.high ...
0 264.48 267.32 ...

[1 行 x 62688 列]

当我只是在浏览器中粘贴 link 时 JSON 响应带有双引号 (")，但是当我通过 python 代码获取它时。所有双引号 (")更改为单引号 (') 知道为什么吗？。虽然我尝试用 json_normalize 解决它，但随后响应更改为 [1 行 x 62688 列]。我不确定我该如何处理 1 行和 62k 列。我不知道如何以我需要的数据帧格式提取确切信息（请参阅 excel 屏幕截图）。

非常感谢任何帮助。谢谢！

Answer 1

你好试试下面的代码。我已经了解数据集的结构并进行了修改以获得所需的输出。 `

resp = requests.get("https://api.cryptowat.ch/markets/summaries")
a=resp.json()
a['result']
#creating Dataframe froom key=result
da=pd.DataFrame(a['result'])
#using Transpose to get required Columns and Index
da=da.transpose()
#price columns contains a dict which need to be seperate Columns on the data frame
db=da['price'].to_dict()
da.drop('price', axis=1, inplace=True)
#intialising seperate Data frame for price
z=pd.DataFrame({})
for i in db.keys():
    i=pd.DataFrame(db[i], index=[i])
    z=pd.concat([z,i], axis=0 )
da=pd.concat([z, da], axis=1)
da.to_excel('nex.xlsx')`

Answer 2

结果JSON是一个dict
将其加载到数据框中
将列解码为产品和度量
筛选所需数据

import requests
import pandas as pd
import numpy as np

# load results into a data frame
df = pd.json_normalize(requests.get("https://api.cryptowat.ch/markets/summaries").json()["result"])

# columns are encoded as product and measure.  decode columns and transpose into rows that include product and measure
cols = np.array([c.split(".", 1) for c in df.columns]).T
df.columns = pd.MultiIndex.from_arrays(cols, names=["product","measure"])
df = df.T

# finally filter down to required data and structure measures as columns
df.loc[df.index.get_level_values("product").str[:7]=="kraken:"].unstack("measure").droplevel(0,1)

示例输出

product	price.last	price.high	price.low	price.change.percentage	price.change.absolute	volume	volumeQuote
kraken:aaveaud	347.41	347.41	338.14	0.0274147	9.27	1.77707	613.281
kraken:aavebtc	0.008154	0.008289	0.007874	0.0219326	0.000175	403.506	3.2797
kraken:aaveeth	0.1327	0.1346	0.1327	-0.00673653	-0.0009	287.113	38.3549
kraken:aaveeur	219.87	226.46	209.07	0.0331751	7.06	1202.65	259205
kraken:aavegbp	191.55	191.55	179.43	0.030559	5.68	6.74476	1238.35
kraken:aaveusd	259.53	267.48	246.64	0.0339841	8.53	3623.66	929624
kraken:adaaud	1.61792	1.64602	1.563	0.0211692	0.03354	5183.61	8366.21
kraken:adabtc	3.757e-05	3.776e-05	3.673e-05	0.0110334	4.1e-07	252403	9.41614
kraken:adaeth	0.0006108	0.00063	0.0006069	-0.0175326	-1.09e-05	590839	367.706
kraken:adaeur	1.01188	1.03087	0.977345	0.0209986	0.020811	1.99104e+06	1.98693e+06

Python Pandas 来自 API JSON 响应的数据帧 >>

Python Pandas Dataframe from API JSON Response >>

python

json

dataframe

pandas

json-normalize

示例输出