en | ru

Парсер изображений и текста

Генератор дорвеев RedButton может автоматически парсить изображения и текст из поисковых систем, чтобы в дальнейшем использовать их при генерации. Парсинг — довольно длительный процесс, поэтому вначале вы добавляете задания, а потом уже можете заняться своими делами, пока будет идти парсинг.

Парсинг изображений

Ключевые слова

Выберите кейворды из списка или из файла, по которым будет осуществлен парсинг изображений.

Путь для картинок

Выберите папку, в которую будут загружены изображения. В этом списке отображаются все папки из папки "/data/images". Вы можете создать там дополнительную папку, если это необходимо.

Язык парсера

Выберите язык, на котором будут делаться поисковые запросы. В зависимости от языка меняется поисковая выдача. Если ваши кейворды на английском языке, то уместно выбрать именно английский язык.

Включить многопоточность

Эта опция позволяет осуществлять парсинг в многопоточном режиме. Обратите внимание, что при этом возникает существенная нагрузка на процессор.

Google Image

Выберите эту опцию, чтобы искать картинки в Google Images.

Yandex Image

Выберите эту опцию, чтобы искать картинки в Яндекс.Картинках.

Парсинг текста

Ключевые слова

Выберите кейворды из списка или из файла, по которым будет осуществлен парсинг текста. По каждому ключевому слову будет осуществлен поиск текста из сайтов, находящихся на первых двух страницах выдачи.

Имя файла с текстом

Укажите имя файла с текстом, под которым будет сохранен файл с результатами парсинга. Файлы сохраняются в папке "/data/texts".

Язык парсера

Выберите язык, на котором будут делаться поисковые запросы. В зависимости от языка меняется поисковая выдача. Если ваши кейворды на английском языке, то уместно выбрать именно английский язык.

Включить многопоточность

Эта опция позволяет осуществлять парсинг в многопоточном режиме. Обратите внимание, что при этом возникает существенная нагрузка на процессор.

Google

Выберите эту опцию, чтобы искать текст через Google.

Yandex

Выберите эту опцию, чтобы искать текст через Яндекс

Метод получения контента

Выберите один из методов получения контента. Оба метода работают с одинаковой скоростью, но по-разному извлекают и обрабатывают текст с сайтов.