Дорген, который создает дорвеи на основе выдачи поисковых систем. Актуальная версия доргена на момент публикации данного поста: Indigo v1.23 Функцониал актуальной версии доргена: посокольку дорген неоднократно обновлялся и продолджает обновляться - функционал может иметь расхождения от версии к версии. Многопоточность (для Windows) Возможность работы под OS Linux (как php-скрипт) / OS Windows (как консольное приложение) Два независимых режима работы дорегна режим Parsedor - генерация на основе спаршенной выдачи SE (не поддерживает меток, минимализм в настройке) режим Custom Template - генерация на основе пользовательского шаблона (поддерживает метки) Возможность сохранять доры локально в папке dor доргена / генерировать сразу на FTP Дифференцированные настройки proxy - использование прокси для заливки на FTP и для парсинга настраивается отдельными независимыми параметрами. Типы поддерживаемых прокси: SOCKS5 (может быть расширено в будущих версиях) Автоматическая обработка "падений" прокси (дорген автоматически подбирает рабочий прокси, на загрузку одного файла по FTP выделено 15 попыток) Встроенный проксичекер генерация листов URL в формате html и bb. на все доры генерируется общий лист с URL (для дальнейшей обработки в kwk) ЯП php все конфигурации задаются в файле настроек, вэбинтерфейс отсутствует создает малую нагрузку на процессор благодаря оптимизации процесса запуска потоков. 1Гц процесоро 1500mb ОЗУ OS Windows при запуске 40 потоков загрузка процессора 7-12% пинг залитых страниц (для режима загрузки по FTP) Стоимость доргена Indigo составляет $40.
где найти мануал, хотя бы общий? и это не флуд, просто раньше таким не занимался, а сейчас думаю поэксперементировать.
этот ген основан на поисковой выдаче, как и SED. Но дешевле... кто-то может сравнить, что лучше? трудности выбора... отзывов что то нет...