Архивы рубрики: ‘Новости’

Обзор обновления Content Downloader X1 до версии 11.9999950 (12.05.2016)

– Во встроенном планировщике программы (ctrl+p) появилась возможность назначать для каждого проекта индивидуальный вариант запуска (“запускать парсинг во вкладке” или “запускать сканер сайтов”);
– В поле custom headers (в окне ctrl+h) добавлен макрос [ROTATION] (служит в качестве разделителя наборов HTTP-заголовков для их автоматической смены при парсинге);
– Макрос [WRITEITATFIRSTDOC] теперь работает корректно, если парсить с дозаписью в файлы с разными именами (также опция “парсить в 1 файл” для этого должна быть включена);
– Множество других доработок.

(more…)

Добавлена возможность задания имен для повторяющихся границ парсинга

Content Downloader X1 версии 11.9999949 (03.05.2016)

– Добавлена возможность задания имен для повторяющихся границ парсинга;
– Несколько других доработок.

Content Downloader (more…)

Расширение возможностей версии ULTIMATE

Content Downloader's types
(more…)

Описание работы макросов [COUNTUP1] и [COUNTUP2]

Макросы шаблона вывода [COUNTUP1] и [COUNTUP2] используются для подсчета количества вхождений указанной подстроки в тексте или количества частей текста, разграниченных указанным разделителем. (more…)

Обновление Content Downloader до версии 11.9999933

– Реализован вывод вспомогательных элементов для макроса [FINAL_REPLACE] (появление кнопок EDIT, подсветка макроса и прочее);
– В анализаторе базовых макросов (f9) реализован вывод кнопок EDIT для макросов GETMORECONTENT;
– В анализаторе базовых макросов (f9) реализован вывод кнопок EDIT для макросов WBAPP;
– Добавлены макросы шаблона вывода [COUNTUP1] и [COUNTUP2] (они служат для подсчета количества перечисленных через определенный разделитель элементов текста);
– Множество других доработок.

(more…)

Получение редиректов ссылок (макрос [GETREDIRECT])

Например, есть ссылка, при открытии которой происходит редирект (перенаправление) на другой URL-адрес. Чтобы получить адрес, на который происходит перенаправление, используется макрос [GETREDIRECT].

1
2
3
4
5
6
7
8
9
1 [GETREDIRECT]http://SBFactory.ru/original[/GETREDIRECT]
2 [GETREDIRECT][LIB2]http://SBFactory.ru/original[/GETREDIRECT]
3 [GETREDIRECT][GRHEADERS]Host: sbfactory.ru
User-Agent: Mozilla/5.0 (Windows NT 6.1; WOW64; rv:45.0) Gecko/20100101 Firefox/45.0
Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8
Accept-Language: ru-RU,ru;q=0.8,en-US;q=0.5,en;q=0.3
Accept-Encoding: gzip, deflate
Connection: keep-alive
Cache-Control: max-age=0[/GRHEADERS]http://SBFactory.ru/original[/GETREDIRECT]

(more…)

Парсинг магазина, где у карточек товаров нет отдельных WEB-страниц

Карточка товара подгружается HTTP-запросом со страницы рубрики сайта и отображается в виде “всплывающего окна”. (more…)