Наивный подход
def transpose_finite_iterable(iterable):
return zip(*iterable) # `itertools.izip` for Python 2 users
отлично работает для конечных итераций (например, последовательности типа list
/ tuple
/ str
) (потенциально бесконечных) итераций, которые можно проиллюстрировать как
| |a_00| |a_10| ... |a_n0| |
| |a_01| |a_11| ... |a_n1| |
| |... | |... | ... |... | |
| |a_0i| |a_1i| ... |a_ni| |
| |... | |... | ... |... | |
, где
n in ℕ
a_ij
соответствует j
-ому элементу i
-ной итерации,
и после применения transpose_finite_iterable
получаем
| |a_00| |a_01| ... |a_0i| ... |
| |a_10| |a_11| ... |a_1i| ... |
| |... | |... | ... |... | ... |
| |a_n0| |a_n1| ... |a_ni| ... |
Python пример такого случая, где a_ij == j
, n == 2
>>> from itertools import count
>>> iterable = [count(), count()]
>>> result = transpose_finite_iterable(iterable)
>>> next(result)
(0, 0)
>>> next(result)
(1, 1)
Но мы не можем использовать transpose_finite_iterable
снова, чтобы вернуться к структуре исходного iterable
, потому что result
- это бесконечная итерация конечных итераций (в нашем случае tuple
):
>>> transpose_finite_iterable(result)
... hangs ...
Traceback (most recent call last):
File "...", line 1, in ...
File "...", line 2, in transpose_finite_iterable
MemoryError
Так, как мы можем иметь дело с этим делом?
... и вот идет deque
После того, как мы рассмотрим документы itertools.tee
function , есть рецепт Python, который с некоторыми изменениями может помочь в нашем случае
def transpose_finite_iterables(iterable):
iterator = iter(iterable)
try:
first_elements = next(iterator)
except StopIteration:
return ()
queues = [deque([element])
for element in first_elements]
def coordinate(queue):
while True:
if not queue:
try:
elements = next(iterator)
except StopIteration:
return
for sub_queue, element in zip(queues, elements):
sub_queue.append(element)
yield queue.popleft()
return tuple(map(coordinate, queues))
давайте проверим
>>> from itertools import count
>>> iterable = [count(), count()]
>>> result = transpose_finite_iterables(transpose_finite_iterable(iterable))
>>> result
(<generator object transpose_finite_iterables.<locals>.coordinate at ...>, <generator object transpose_finite_iterables.<locals>.coordinate at ...>)
>>> next(result[0])
0
>>> next(result[0])
1
Синтез
Теперь мы можем определить общую функцию для работы с итерациями итерируемых, одни из которых конечны, а другие потенциально бесконечны, используя functools.singledispatch
decorator like
from collections import (abc,
deque)
from functools import singledispatch
@singledispatch
def transpose(object_):
"""
Transposes given object.
"""
raise TypeError('Unsupported object type: {type}.'
.format(type=type))
@transpose.register(abc.Iterable)
def transpose_finite_iterables(object_):
"""
Transposes given iterable of finite iterables.
"""
iterator = iter(object_)
try:
first_elements = next(iterator)
except StopIteration:
return ()
queues = [deque([element])
for element in first_elements]
def coordinate(queue):
while True:
if not queue:
try:
elements = next(iterator)
except StopIteration:
return
for sub_queue, element in zip(queues, elements):
sub_queue.append(element)
yield queue.popleft()
return tuple(map(coordinate, queues))
def transpose_finite_iterable(object_):
"""
Transposes given finite iterable of iterables.
"""
yield from zip(*object_)
try:
transpose.register(abc.Collection, transpose_finite_iterable)
except AttributeError:
# Python3.5-
transpose.register(abc.Mapping, transpose_finite_iterable)
transpose.register(abc.Sequence, transpose_finite_iterable)
transpose.register(abc.Set, transpose_finite_iterable)
, который можно рассматривать как собственный обратный (математики называют этот тип функций "инволюциями" ) в классе бинарных операторов над конечными непустыми итерациями.
В качестве бонуса singledispatch
ing мы можем обрабатывать numpy
массивов, таких как
import numpy as np
...
transpose.register(np.ndarray, np.transpose)
и затем используйте его как
>>> array = np.arange(4).reshape((2,2))
>>> array
array([[0, 1],
[2, 3]])
>>> transpose(array)
array([[0, 2],
[1, 3]])
Примечание
Поскольку transpose
возвращает итераторы, и если кто-то хочет иметь tuple
из list
s, как в OP - это можно сделать дополнительно с помощью встроенной функции map
like
>>> original = [('a', 1), ('b', 2), ('c', 3), ('d', 4)]
>>> tuple(map(list, transpose(original)))
(['a', 'b', 'c', 'd'], [1, 2, 3, 4])
Реклама
Я добавил обобщенное решение для lz
пакета из 0.5.0
версии, которую можно использовать как
>>> from lz.transposition import transpose
>>> list(map(tuple, transpose(zip(range(10), range(10, 20)))))
[(0, 1, 2, 3, 4, 5, 6, 7, 8, 9), (10, 11, 12, 13, 14, 15, 16, 17, 18, 19)]
приписка
Не существует решения (по крайней мере, очевидного) для обработки потенциально бесконечной итерируемой потенциально потенциально бесконечной итерации, но этот случай встречается реже.