Исходное сообщение
"Язык Perl еще далек от забвения, несмотря на заявления " Отправлено Добрый Дохтур, 08-Ноя-09 18:37
>открываем файл, читаем построчно и сравниваем с шаблонами. >в питоне это можно сделать как-то быстрее? объявляем функцию, выполняющую интересующие нас действия над файлом и принимающую в кач-ве аргумента имя файла и список регулярок. функция возвращает результат. создаём пул из N-воркеров, читаем список файлов в интересующем нас каталоге, оставляем только файлы. Говорим, что пул будет исполнять нашу функцию, в кач-ве списка аргументов - список файлов. получаем результат работы в виде списка. Воркеры могут быть не только на этой машине, но и на других(т.е. если есть некая сетевая фс, доступная на всех хостах - вообще сказка). Народ так делает собственные имплементации Map/Reduce(когда использовать вещи вроде Hadoop/Disco - из пушки по воробьям).

Ваше сообщение
Имя*:
EMail:	Для отправки ответов на email укажите знак ! перед адресом, например, !user@host.ru (!! - не показывать email). Более тонкая настройка отправки ответов производится в профиле зарегистрированного участника форума.
Заголовок*:
Сообщение*:	>>открываем файл, читаем построчно и сравниваем с шаблонами. >>в питоне это можно сделать как-то быстрее? > объявляем функцию, выполняющую интересующие нас действия над файлом и принимающую в кач-ве > аргумента имя файла и список регулярок. > функция возвращает результат. > создаём пул из N-воркеров, читаем список файлов в интересующем нас каталоге, оставляем > только файлы. > Говорим, что пул будет исполнять нашу функцию, в кач-ве списка аргументов - > список файлов. > получаем результат работы в виде списка. > Воркеры могут быть не только на этой машине, но и на других(т.е. > если есть некая сетевая фс, доступная на всех хостах - вообще > сказка). > Народ так делает собственные имплементации Map/Reduce(когда использовать вещи вроде Hadoop/Disco > - из пушки по воробьям).
	Введите код, изображенный на картинке: