Описание

Репозиторий иллюстрирует пример реализации map-reduce из книжки Эффективный питон: 59 советов (совет 24)

Чтобы проверить работу map-reduce, выполните:

./count_words.py

В файле transform_example.py добавлена простая реализация map-reduce воркера Transformer, который применяет произвольную трансформирующую функцию к последовательности, которую возвращает reader. В качестве примера показано, как выполнить трансформацию из класса CountVectorizer. Чтобы проверить работу трансформера, запустите из командной строки

./transform_example.py