В чем заключается хитрость функции Python any ()?

Question

Один из сообщений pycon2011 поделился этим any() функциональным приемом; объяснение было в том, что цикл находится в C.

Может ли кто-нибудь объяснить больше об этом? В чем заключается хитрость и есть ли другие варианты использования?

>>> import itertools, hashlib, time
>>> _md5 = hashlib.md5()
>>> def run():
...   for i in itertools.repeat('foo', 10000000):
...     _md5.update(i)
... 
>>> a = time.time(); run(); time.time() -a
3.9815599918365479
>>> _md5 = hashlib.md5()
>>> def run():
...   any(itertools.imap(_md5.update, itertools.repeat('foo', 10000000)))
... 
>>> a = time.time(); run(); time.time() -a
2.1475138664245605
>>> 

Answer 1

itertools.imap создает ленивый список, который содержит функцию для оценки (md5) и ее аргумент (строка 'foo'). На этом этапе вызовы md5 не оцениваются, а подготавливаются вместе с их аргументами (я думаю, что они называются thunks). Когда вы затем передаете этот итератор любой функции, он проходит через все элементы, оценивающие их. Это происходит быстрее, чем явная оценка Python из первой программы, потому что any реализован на C, и все происходит в коде библиотеки C без возврата к интерпретатору после каждого элемента итератора.

Answer 2

Там нет "хитрости" как таковой; выполнение скомпилированного кода на C выполняется быстрее, чем запуск байт-кода Python .