Вы можете использовать itertools.tee
и zip
для эффективного построения результата:
from itertools import tee
# python2 only:
#from itertools import izip as zip
def differences(seq):
iterable, copied = tee(seq)
next(copied)
for x, y in zip(iterable, copied):
yield y - x
Или используя itertools.islice
вместо этого:
from itertools import islice
def differences(seq):
nexts = islice(seq, 1, None)
for x, y in zip(seq, nexts):
yield y - x
Вы также можете избежать использования itertools
модуля:
def differences(seq):
iterable = iter(seq)
prev = next(iterable)
for element in iterable:
yield element - prev
prev = element
Все эти решения работают в постоянном пространстве, если вам не нужно хранить все результаты и поддерживать бесконечное количество итераций.
Вот несколько микротестов решений:
In [12]: L = range(10**6)
In [13]: from collections import deque
In [15]: %timeit deque(differences_tee(L), maxlen=0)
10 loops, best of 3: 122 ms per loop
In [16]: %timeit deque(differences_islice(L), maxlen=0)
10 loops, best of 3: 127 ms per loop
In [17]: %timeit deque(differences_no_it(L), maxlen=0)
10 loops, best of 3: 89.9 ms per loop
И другие предлагаемые решения:
In [18]: %timeit [x[1] - x[0] for x in zip(L[1:], L)]
10 loops, best of 3: 163 ms per loop
In [19]: %timeit [L[i+1]-L[i] for i in range(len(L)-1)]
1 loops, best of 3: 395 ms per loop
In [20]: import numpy as np
In [21]: %timeit np.diff(L)
1 loops, best of 3: 479 ms per loop
In [35]: %%timeit
...: res = []
...: for i in range(len(L) - 1):
...: res.append(L[i+1] - L[i])
...:
1 loops, best of 3: 234 ms per loop
Обратите внимание, что:
zip(L[1:], L)
эквивалентно, zip(L[1:], L[:-1])
поскольку zip
уже завершается на кратчайшем вводе, однако избегает полной копииL
.
- Доступ к отдельным элементам по индексу происходит очень медленно, потому что каждый доступ к индексу - это вызов метода в python.
numpy.diff
это медленно , потому что он должен сначала преобразовать list
к ndarray
. Очевидно, что если вы начнете с a, ndarray
это будет намного быстрее:
In [22]: arr = np.array(L)
In [23]: %timeit np.diff(arr)
100 loops, best of 3: 3.02 ms per loop
[abs(j-i) for i,j in zip(t, t[1:])]