标签: python-itertools

我如何使用python itertools.groupby()按其第一个字符对字符串列表进行分组?

我有一个类似于此列表的字符串列表:

tags = ('apples', 'apricots', 'oranges', 'pears', 'peaches')
Run Code Online (Sandbox Code Playgroud)

我应该如何使用itertools.groupby()按每个字符串中的第一个字符对此列表进行分组?我应该如何提供itertools.groupby()所需的'key'参数?

python string python-itertools

7
推荐指数
3
解决办法
1万
查看次数

itertools中的izip_longest:这里发生了什么?

我很想知道下面的代码是如何工作的.它来自http://docs.python.org/library/itertools.html#itertools.izip_longest,并且是izip_longest迭代器的纯python等价物.我对哨兵功能特别神秘,它是如何工作的?

def izip_longest(*args, **kwds):
    # izip_longest('ABCD', 'xy', fillvalue='-') --> Ax By C- D-
    fillvalue = kwds.get('fillvalue')
    def sentinel(counter = ([fillvalue]*(len(args)-1)).pop):
        yield counter()         # yields the fillvalue, or raises IndexError
    fillers = repeat(fillvalue)
    iters = [chain(it, sentinel(), fillers) for it in args]
    try:
        for tup in izip(*iters):
            yield tup
    except IndexError:
        pass
Run Code Online (Sandbox Code Playgroud)

python python-itertools

7
推荐指数
2
解决办法
5055
查看次数

当`starmap`可能优于`List Comprehension`

在回答Clunky计算增量数字之间差异的问题时,是否有更美妙的方法?,我想出了两个解决方案,一个List Comprehension和另一个使用list comprehension.

对我来说,starmapSyntax看起来更清晰,可读,更简洁,更Pythonic.但仍然List Comprehension在itertools中可用,我想知道,必须有一个理由.

我的问题是什么时候There should be one-- and preferably only one --obvious way to do it.可以优先考虑LC?

注意如果它是Style的问题那么它肯定是矛盾的LC

头对头比较

可读性很重要.---starmap

它再次成为一种感知问题,但对我starmap来说更具可读性operator.要使用lambda,您需要导入multi-variable,或定义itertools或显式LC功能,然而从中进行额外导入List Comprehension.

表现 ---list comprehension

>>> def using_star_map(nums):
    delta=starmap(sub,izip(nums[1:],nums))
    return sum(delta)/float(len(nums)-1)
>>> def using_LC(nums):
    delta=(x-y for x,y in izip(nums[1:],nums))
    return sum(delta)/float(len(nums)-1)
>>> nums=[random.randint(1,10) for …
Run Code Online (Sandbox Code Playgroud)

python list-comprehension python-itertools

7
推荐指数
2
解决办法
3745
查看次数

生成所有唯一的对排列

我需要生成所有可能的配对,但是约束条件是特定配对仅在结果中出现一次.例如:

import itertools

for perm in itertools.permutations(range(9)):
    print zip(perm[::2], perm[1::2])
Run Code Online (Sandbox Code Playgroud)

生成所有可能的双配对排列; 这是输出的一小部分:

...
[(8, 4), (7, 6), (5, 3), (0, 2)]
[(8, 4), (7, 6), (5, 3), (1, 0)]
[(8, 4), (7, 6), (5, 3), (1, 2)]
[(8, 4), (7, 6), (5, 3), (2, 0)]
[(8, 4), (7, 6), (5, 3), (2, 1)]
[(8, 5), (0, 1), (2, 3), (4, 6)]
[(8, 5), (0, 1), (2, 3), (4, 7)]
[(8, 5), (0, 1), (2, 3), (6, 4)]
[(8, 5), (0, …
Run Code Online (Sandbox Code Playgroud)

python combinatorics python-itertools

7
推荐指数
2
解决办法
4164
查看次数

没有迭代器和/或循环的Numpy数组的组合/笛卡尔积

以下代码

import numpy as np
import itertools

a_p1 = np.arange(0, 4, 1)
a_p2 = np.arange(20, 25, 1)

params = itertools.product(a_p1, a_p2)
for (p1, p2) in params:
    print(p1, p2)
Run Code Online (Sandbox Code Playgroud)

输出

(0, 20) (0, 21) (0, 22) (0, 23) (0, 24) (1, 20) (1, 21) (1, 22) (1, 23) (1, 24) (2, 20) (2, 21) (2, 22) (2, 23) (2, 24) (3, 20) (3, 21) (3, 22) (3, 23) (3, 24)
Run Code Online (Sandbox Code Playgroud)

2嵌套for循环也可以输出相同的结果

for i, p1 in enumerate(a_p1):
    for j, p2 in enumerate(a_p2): …
Run Code Online (Sandbox Code Playgroud)

python arrays numpy scipy python-itertools

7
推荐指数
1
解决办法
5191
查看次数

如何在python中传入和操作大型数据文件

我有一个相对较大(1 GB)的文本文件,我希望通过对各个类别求和来减小它们的大小:

Geography AgeGroup Gender Race Count
County1   1        M      1    12
County1   2        M      1    3
County1   2        M      2    0
Run Code Online (Sandbox Code Playgroud)

至:

Geography Count
County1   15
County2   23
Run Code Online (Sandbox Code Playgroud)

如果整个文件可以适合内存但使用pandas.read_csv()give,这将是一件简单的事情MemoryError.所以我一直在研究其他方法,似乎有很多选择 - HDF5?使用itertools(看起来很复杂 - 生成器?)或者只是使用标准文件方法读取第一个地理位置(70行),将count列相加,并在加载另外70行之前写出.

有没有人对最佳方法有任何建议?我特别喜欢流数据的想法,特别是因为我可以想到很多其他有用的地方.我对这种方法最感兴趣,或者类似地使用最基本功能的方法.

编辑:在这个小案例中,我只想要按地理位置计算的数量.但是,如果我可以读入一个块,指定任何函数(比如一起添加2列,或者按地理位置取一列的最大值),应用函数,并在读取新块之前写入输出,这将是理想的.

python python-itertools dataframe pandas

7
推荐指数
1
解决办法
9745
查看次数

在词典列表中使用"reduce"

我试图写总结是有钥匙的所有值一个简单的Python函数喜欢.我正在为这项任务进行函数式编程.因此,我需要使用一个列表理解,map,filter,或reduce.在这种情况下,我认为reduce是一个合理的选择.

def sum_favorites(msgs):
     num_favorites = reduce(lambda x, y: x["likes"] + y["likes"], msgs)
     return num_favorites


content1 = {"likes": 32, ...}
content2 = {"likes": 8, ...}
content3 = {"likes": 16, ...}
contents = [content1, content2, content3]
print(sum_favorites(contents)) 
Run Code Online (Sandbox Code Playgroud)

问题出现在我实际运行代码时.我似乎收到了类似的东西:TypeError:'int'对象不可订阅.对我来说,这个错误毫无意义.如果reduce是通过给定的参数真正迭代,然后传递到λ-功能的每个项目应该是一个字典-他们每个人肯定有一个喜欢在他们的关键.问题是什么,这个Python错误究竟是什么意思?

python dictionary functional-programming python-itertools

7
推荐指数
2
解决办法
3934
查看次数

列表的所有可能细分

我刚刚写了一个小的递归程序来生成列表的所有可能的细分:

def subdivisions(ls):
    yield [ls]
    if len(ls) > 1:
        for i in range(1, len(ls)):
            for lhs in subdivisions(ls[:i]):
                yield lhs + [ls[i:]]

>>> for x in subdivisions('abcd'): print x
... 
['abcd']
['a', 'bcd']
['ab', 'cd']
['a', 'b', 'cd']
['abc', 'd']
['a', 'bc', 'd']
['ab', 'c', 'd']
['a', 'b', 'c', 'd']
Run Code Online (Sandbox Code Playgroud)

我粗暴地强迫这个,我花了很长时间才弄明白.我想知道这叫什么,因为我确定它有一个名字.

总的来说,我想知道如何从数学的角度来学习这些东西,以及是否有很好的知名编程库来涵盖这样的有用算法(我知道https://docs.python.org/3/library/ itertools.html)


[编辑]这个标记为重复的问题 - 得到一组的所有可能分区 - 获得不同的答案.

它正在寻找{ {{1,2,3},{}} , {{1},{2,3}} , {{1,2},{3}} , {{1,3},{2}}, {{1},{2},{3}}} 一个正确的答案(按照它的术语){ {{1,2,3}} , {{1},{2,3}} , {{1,2},{3}} , {{1},{2},{3}}}

此外,提出问题的关键是要弄清楚这是什么术语; …

python permutation discrete-mathematics python-itertools

7
推荐指数
1
解决办法
367
查看次数

创建迭代器以逐个返回每个可迭代的元素

我正在学习itertools模块,我试图让迭代器从作为输入提供的iterables中返回每个元素.

Agruments   Results
p, q, …     p0, q0, … plast, qlast 
Run Code Online (Sandbox Code Playgroud)

与另外一个骑手,如果说列表长度不同,那么next(it)当较短的列表用完时,应该返回较长列表中的元素.

尝试解决方案

import itertools
l1=[1,2,3,4,5,6]
l2=['a','b','c','d']
l=[]
for x,y in itertools.zip_longest(l1,l2):
    l.extend([x,y])
it=iter(x for x in l if x is not None)
Run Code Online (Sandbox Code Playgroud)

哪种解决了我的问题

print(list(it))
Run Code Online (Sandbox Code Playgroud)

输出:

[1, 'a', 2, 'b', 3, 'c', 4, 'd', 5, 6]
Run Code Online (Sandbox Code Playgroud)

有更简单或更好的方法吗?我在SO上搜索了一个解决方案而无法获得解决方案.

python python-itertools python-3.x

7
推荐指数
1
解决办法
127
查看次数

唯一对的组,每个组中成员出现一次

我有以下代码:

from itertools import groupby
from itertools import combinations


teams = [1, 2, 3, 4, 5, 6, 7, 8, 9, 10]
combo = list(combinations(teams, 2))
Run Code Online (Sandbox Code Playgroud)

输出是45个元组的列表。

[(1, 2), (1, 3), (1, 4), (1, 5), (1, 6), (1, 7), (1, 8), (1, 9), (1, 10), (2, 3), (2, 4), (2, 5), (2, 6), (2, 7), (2, 8), (2, 9), (2, 10), (3, 4), (3, 5), (3, 6), (3, 7), (3, 8), (3, 9), (3, 10), (4, 5), (4, 6), (4, 7), …
Run Code Online (Sandbox Code Playgroud)

python grouping python-itertools

7
推荐指数
1
解决办法
175
查看次数