Key_Value 计数过滤器字典

Question

我正在尝试编写一个过滤器，用于查找键和值的频率计数。在尝试其中一个代码块时，我遇到了以下错误困难。

数据是关于推特用户和各自的关键词。我正在尝试获取用户推文计数的频率以及相应用户发布的每个唯一关键字的计数。数据集有大约 1000 行，而我在输入中显示的只有 20 行。

输入

tweetcricscore  7.15E+17    3/30/2016   #wt20
tweetcricscore  7.15E+17    3/30/2016   #sausvsvic
tweetcricscore  7.15E+17    3/30/2016   #wt20
tweetcricscore  7.15E+17    3/30/2016   #sausvsvic
tweetcricscore  7.14E+17    3/28/2016   #wt20
tweetcricscore  7.14E+17    3/28/2016   #sausvsvic
tweetcricscore  7.14E+17    3/27/2016   #wt20
tweetcricscore  7.14E+17    3/27/2016   #sausvsvic
tweetcricscore  7.14E+17    3/27/2016   #wt20
tweetcricscore  7.14E+17    3/27/2016   #sausvsvic
tweetcricscore  7.14E+17    3/26/2016   #wt20
tweetcricscore  7.14E+17    3/26/2016   #canvsnk
tweetcricscore  7.14E+17    3/26/2016   #wt20
tweetcricscore  7.14E+17    3/26/2016   #sausvsvic
tweetcricscore  7.14E+17    3/26/2016   #wt20
tweetcricscore  7.14E+17    3/26/2016   #sausvsvic
tweetcricscore  7.14E+17    3/26/2016   #wt20
tweetcricscore  7.14E+17    3/26/2016   #sausvsvic
tweetcricscore  7.13E+17    3/23/2016   #wt20
tweetcricscore  7.13E+17    3/23/2016   #indvsban

代码：

with open('filter_1.csv', 'rb') as inp,open('filter_2.csv', 'wb') as out:
    writer = csv.writer(out)
    '''for row in csv.reader(inp):
        l.append(row[0])'''
    for row in csv.reader(inp):
        try:
            key_val = row[0],row[3]
            d[key_val] +=1
        except Exception as e:
            pass
    od = collections.OrderedDict(sorted(d.items()))

    for key,values in od.iteritems():
        writer.writerow([key[0],l.count(key[0]),key[3],values])

预期输出

tweetcricscore  234 #afgvssco   51
tweetcricscore  234 #afgvszim   46
tweetcricscore  234 #banvsire   12
tweetcricscore  234 #banvsned   46
tweetcricscore  234 #canvsnk    1
tweetcricscore  234 #cricket    178
tweetcricscore  234 #engvswi    46
tweetcricscore  234 #hkvssco    23
tweetcricscore  234 #indvsban   1
tweetcricscore  234 #sausvsvic  8
tweetcricscore  234 #wt20   56

我遇到以下错误

28 
     29         for key,values in od.iteritems():
---> 30                 writer.writerow([key[0],l.count(key[0]),key[3],values])
     32 

IndexError: tuple index out of range

该代码只是流程程序的一部分，这部分显示了过滤输入时的错误。任何建议表示赞赏。提前致谢

Answer 1

我无法运行您提供的示例，但根据阅读代码，您似乎正在生成一个 dict，其中键是元组，每个元组都有两个元素：

key_val = row[0],row[3]
d[key_val] +=1

然后在使用相同键的地方生成 OrderedDict 并迭代其上的项目：

for key,values in od.iteritems():
    writer.writerow([key[0],l.count(key[0]),key[3],values])

在第二行，您尝试从 key 获取索引 3 处的元素，这自然会失败，因为其中只有两个元素。如果您将 key[3] 更改为 key[1]，它应该会按预期工作。

Key_Value 计数过滤器字典

Key_Value count filters Dictionary

python

dictionary

frequency

dataset

word-frequency