Новости

Создание столбцов CSV в шаблоне вывода из инструмента задания границ парсинга

Удаление META данных картинок при парсинге

Как загружаются WEB страницы в браузере

Сопоставление товаров из разных интернет магазинов

Какие прокси выбрать для парсинга

Парсинг выдачи Google

Готовые файлы проектов для демо версии Content Downloader X1

Настройка правил транслитизации (транслитерации)

Редактирование шаблона вывода в виде таблицы

Мультиаккаунты

Как выборочно отключить контейнер ячеек для определенных ячеек CSV (оператор {NOCONTAINER})

Формат CSV файлов

Как парсить только свежие статьи или товары (фильтрация по дате публикации)

Генерация комбинаций из нескольких массивов значений

Авторизация на сайтах методом передачи cookie из монитора сети браузера Firefox

Работа со строкой заголовка и шаблоном вывода при настройке парсинга в CSV

Парсинг выдачи Google

Парсинг YouTube

Парсинг телефонов с Авито

Нюансы парсинга и настройки программы (важно усвоить)

Обработка файлов на локальном диске (как обработать содержимое файлов и затем сохранить изменения)

Понимание принципа работы списка событий и описание событий WBAppCEF

Использование оператора [PARAM] в элементах списка ссылок

Параметр конца обычных границ парсинга [JSONAUTO] (автоматический поиск закрывающей фигурной или квадратной скобки)

Размещение программы на хостинге с Windows Server для автоматического наполнения/изменения баз данных сайта

Вставка в каждый цикл повторяющихся границ парсинга нужных значений переменных, заданных (в другом месте) с помощью макроса [VAR]

Как производить мониторинг, анализ и сравнение цен товаров от разных магазинов

Парсинг картинок товаров в случаях, когда картинки подгружаются при выборе/смене цвета товара (или другой опции)

Как передать Cookie и другие HTTP заголовки в программу

Оформление POST данных для библиотеки Clever Internet Suite (CIS)

Закачка подключенных CSV на FTP при завершении парсинга контента

Подключение CSV файлов с их предварительным скачиванием по URL

Создание структуры рубрик XML (с Id и parentId)

Автоматический перевод текста при парсинге

Как получать MD5 файлов

Добавление последнего WEB-документа в список ссылок с указанным шаблоном вывода при парсинге во вкладке “Контент” с помощью макроса [ADDFINALDOCUMENT]

Антивирусы могут вмешиваться в работу программы и воздействовать на результат

WBApp CEF

Выбор движка браузера WBApp

Парсинг телефонов с сайтов, где для отображения телефона нужно кликнуть по кнопке (парсим с помощью макросов PHP_SCRIPT и GETMORECONTENT)

Запуск PHP-скриптов перед парсингом контента

Фильтрация товаров при парсинге по нескольким условиям

Менеджер макросов шаблона вывода

Как выполнить определенные макросы только при парсинге первого WEB-документа

Как пропускать скачивание файлов по одинаковым ссылкам и вставлять нужные данные в результат

Преобразование относительных ссылок HTML-тегов текста в абсолютные

Лог парсинга WEB документов (для вкладок “Контент” и “Ссылки”)

Как объединить (склеить) несколько CSV файлов (простым методом)

Парсинг характеристик товаров в случаях, когда имена и значения характеристик идут не поочередно, а отдельно (сначала перечислены имена, потом значения)

Парсинг JSON

Как генерировать в строке заголовка текст по шаблону с нарастающими переменными

Как быстро просматривать контент границ парсинга в главном окне программы

Как быстро добавить макросы в шаблон нужной повторяющейся границы парсинга

Функция создания шаблона вывода на основе заданных границ парсинга

Использование [DFSTATUS] для вывод статуса работы макросов DOWNLOADFILE

Как отключить автоматическое переименование файлов (и другие опции DOWNLOADFILE)

Автоматическая авторизация через WBApp при парсинге

Парсинг ссылок или товаров с автоматическим прокликиванием всех страниц рубрики сайта (с помощью WBApp)

Если событие вставки текста в поля WEB-страницы не срабатывает или срабатывает некорректно

Если в коде WEB-документа нет URL-адресов картинок

Как взять Cookie с сайта

Если при предпросмотре все WEB-страницы загружаются, а при парсинге происходят пропуски некоторых WEB-страниц

Автоматизация выполнения различных действий (автозагрузка списка ссылок перед парсингом, постобработка CSV, зарузка картинок на FTP и прочее)

Отключите сглаживание неровностей экранных шрифтов Windows

Как производить поиск-замену в только что загруженном коде WEB-документа при парсинге (выполняется перед вычислением границ парсинга)

Пособие специалистам по настройке для работы с заявками клиентов

Как создавать заявки для получения услуг специалистов по настройке

Как парсить данные, которые динамически подгружаются WEB-страницей запросами POST

Как в WBApp прокликивать страницы выдачи сайта по кнопке типа “на следующую страницу”

Использование в URL-адресах динамического оператора {num:a,b} при парсинге во вкладке “Ссылки”

Как допарсить данные в CSV-файл на диске (например, загрузить картинки)

Как парсить “вхолостую” (без отправки запросов, только лишь выполняя макросы шаблона вывода) во вкладке “Контент” (оператор [BLANK])

Добавление текстовых заметок к коду шаблона вывода, комментирование частей кода шаблона вывода

Работа с вложенными блоками кода шаблона вывода

Что делать, если не парсятся HTTPS-сайты (решение)

Если не скачиваются файлы по HTTPS-протоколу

Менеджер шаблонов вывода, макросов и правил поиск-замены

Вывод в результат парсинга контента размерностей изображений (ширина и высота), скачанных макросом DOWNLOADFILE

Парсинг товаров из указанных рубрик с помощью сканера сайтов (когда количество страниц со списком товаров в каждой рубрике разное)

Запись текущего кода WEB-страницы в файл на диске

Как с помощью макроса DOWNLOADFILE скачивать картинки из HTML-тегов IMG

Программные операторы разделителей ячеек CSV: [CSVCS], [CSVLB], {CSVCS}, {CSVLB}, [CSVCS]→

Переименование изображений для CMS OpenCart (задание имен файлов дополнительных изображений с нарастающим индексом)

Вывод одних и тех же картинок в каждом цикле повторяющихся границ парсинга (с помощью макроса [VAR])

Отключение появления в Internet Explorer предупреждения системы безопасности “не удается подтвердить подлинность этого веб-сайта или целостность этого соединения”

Удаление определенных строк из текстового файла на диске с использованием макроса [DELFILESTRING]

Выполнение операций с файлами на диске (копирование, перемещение, удаление) с помощью макроса шаблона вывода [FILEACTIONS] / Удаление указанных файлов с FTP сервера

Выключение компьютера при завершении парсинга контента

Как сделать, чтобы количество столбцов CSV, создаваемых повторяющимися границами парсинга было всегда одинаковым, вне зависимости от количества найденных циклов (чтобы столбцы справа не плавали)

Поиск по Системе помощи

Изменение размеров изображений, скачиваемых макросом DOWNLOADFILE

Параметр конца обычных границ парсинга [AUTO] (автоматический поиск закрывающего HTML-тега)

Имитация нажатий кнопок мыши и клавиатуры в WBApp

Парсинг составных XML-карт сайтов (в карте сайта находятся ссылки на несколько XML-карт)

Автоматический парсинг сразу всех характеристик товаров с автоматическим созданием соответствующих колонок CSV (макрос [DYNAMICVALUES])

Как избежать бана при парсинге некоторых сайтов (изменить количество потоков, выставить паузу между запросами, использовать прокси)

Парсинг e-mail адресов из кода WEB-документа

Парсинг сайтов с экзотическими языками (китайский и прочие)

Как парсить несколько товаров с одной web-страницы (используя повторяющиеся границы парсинга)

Функции поиск-замены