分解组合生成器以将其与芹菜一起分发

Question

这是我的台词：

generator = chain((product('ABCDE', repeat=k) for k in range(1,10)))

我想将它分发到多台计算机上。

我打算用芹菜（但我对其他东西持开放态度）。

但目前我不知道如何分割这条线来分配一代。

如果有人有任何线索

谢谢

Answer 1

下面是生成 5 种不同生成器的简单方法：

from itertools import product, islice

letters = 'ABCDE'

def make_generator(first_letter):
    return ((first_letter,) + rest
            for k in range(9)
            for rest in product(letters, repeat=k))

for letter in letters:
    print map(''.join, islice(make_generator(letter), 20)), '...'

输出：

['A', 'AA', 'AB', 'AC', 'AD', 'AE', 'AAA', 'AAB', 'AAC', 'AAD', 'AAE', 'ABA', 'ABB', 'ABC', 'ABD', 'ABE', 'ACA', 'ACB', 'ACC', 'ACD'] ...
['B', 'BA', 'BB', 'BC', 'BD', 'BE', 'BAA', 'BAB', 'BAC', 'BAD', 'BAE', 'BBA', 'BBB', 'BBC', 'BBD', 'BBE', 'BCA', 'BCB', 'BCC', 'BCD'] ...
['C', 'CA', 'CB', 'CC', 'CD', 'CE', 'CAA', 'CAB', 'CAC', 'CAD', 'CAE', 'CBA', 'CBB', 'CBC', 'CBD', 'CBE', 'CCA', 'CCB', 'CCC', 'CCD'] ...
['D', 'DA', 'DB', 'DC', 'DD', 'DE', 'DAA', 'DAB', 'DAC', 'DAD', 'DAE', 'DBA', 'DBB', 'DBC', 'DBD', 'DBE', 'DCA', 'DCB', 'DCC', 'DCD'] ...
['E', 'EA', 'EB', 'EC', 'ED', 'EE', 'EAA', 'EAB', 'EAC', 'EAD', 'EAE', 'EBA', 'EBB', 'EBC', 'EBD', 'EBE', 'ECA', 'ECB', 'ECC', 'ECD'] ...

同样你可以通过固定前两个字母等来产生25

请注意，我没有使用 chain，因为它在传递单个可迭代对象时不执行任何操作。你可能想要 chain.from_iterable 但我对此表示怀疑，因为那样会产生单个字母。

make_generator 也可以写成：

for k in range(9):
    for rest in product(letters, repeat=k):
        yield (first_letter,) + rest

分解组合生成器以将其与芹菜一起分发

fractionate a combination generator to distribute it with celery

python

distributed

distributed-computing