Архивы рубрики: ‘Новости’

Обновление программы Content Downloader до версии 25.51

content downloader Скачать/обновить программу
Просмотреть весь лог изменений
Обсудить на форуме

Content Downloader версии 25.37 (27.12.2011):

– Добавлены хоткеи для задания начала и конца парсинга (в инструменте задания границ);
– Сканер сайтов теперь может собрать до 5 000 000 ссылок (ранее собирал около 1 000 000);
– Макрос шаблона вывода DOWNLOADFILE теперь может определять расширение файла в автоматическом режиме по Content-Disposition;
– Макрос шаблона вывода DOWNLOADFILE теперь может грузить файлы с HTTPS;
– Несколько доработок.

Content Downloader версии 25.37 (27.12.2011):

– Важное исправление программного кода.

Content Downloader версии 25.33 (27.12.2011):

– Устранена проблема с символами “ё” в макросе [PARAM];
– Доработан макрос шаблона вывода STRTOINTID (преобразование текста в числовой ID).

(more…)

Обновление программы Content Downloader до версии 25.27

content downloader Скачать/обновить программу
Просмотреть весь лог изменений
Обсудить на форуме

Content Downloader версии 25.27 (27.12.2011):

– Добавлено два новых макроса шаблона вывода: PHP_SCRIPT_3 и PHP_SCRIPT_4 (выполняются практически после всех функций, перед загрузкой картинок);
– Теперь, при закрытии окна сканера сайтов, процесс сбора ссылок не прекращается (идет в фоновом режиме);
– Множество доработок.

Content Downloader версии 25.24 (24.12.2011):

– Неколько доработок.

Content Downloader версии 25.21 (21.12.2011):

– Добавлены функции копирования и очистки столбцов (правый клик по таблице) в редакторе CSV файлов;
– Теперь при генерации списка ссылок по диапазону можно добавлять нули к началу чисел (в которых количество цифр меньше, чем в числе конечного значения диапазона);
– В шаблон вывода добавлен макрос IMORE (вставка тега more);
– Макрос шаблона вывода SHORT теперь выполняется после почти всех функций обработки (но перед макросами REPLACE);
– Добавлен макрос шаблона вывода FIRST_REPLACE (поиск-замена, выполняется почти сразу после вычисления границ парсинга);
– В макрос шаблона вывода DOWNLOADFILENAMES_ (для задания имен сохраняемых файлов с помощью DOWNLOADFILE) теперь можно прописывать не только имя файла, но и папку (например, DOWNLOADFILENAMES_папка1/имя);
– Теперь инструмент “обработка и импорт в КМС” поддерживает unicode (utf-8);
– Множество доработок.

(more…)

Обновление программы Content Downloader до версии 25.18

content downloader Скачать/обновить программу
Просмотреть весь лог изменений
Обсудить на форуме

Content Downloader версии 25.18 (18.12.2011):

– В макросе шаблона вывода GETMORECONTENT теперь есть поддержка специального тега {br};
– Исправлена работа макроса шаблона вывода DOWNLOADFILENAMES_;
– Добавлена поддержка редиректов в макрос шаблона вывода DOWNLOADFILE;
– В “Настройка повторяющихся границ” добавлен макрос [VALUE] (который позволяет по нескольку раз выводить значение каждой повторяющейся границы парсинга);
– В макросы шаблона вывода REPLACE (поиск-замена) разделять правила замены теперь можно макросом {break};
– Теперь глобальная функция htm to txt не рвет на строки циклы повторяющихся границ (при сохранении файлов в CSV);
– Несколько доработок.

Content Downloader версии 25.15 (15.12.2011):

– Теперь сайты по https-протоколу можно парсить в 10 потоков;
– В макросы шаблона вывода GETMORECONTENT и PHP_SCRIPT введена поддержка https-протокола;
– Во всех окнах связанных с парсингом программы теперь работает сочетание клавиш Ctrl+A (выделить все);
– Несколько доработок и исправлений.

Content Downloader версии 25.14 (14.12.2011):

– В шаблон вывода добавлен макрос [COUNT] (вставка увеличивающегося числа, стартовое значение которого сбрасывается в каждом документе);
– Несколько доработок.

Content Downloader версии 25.12 (12.12.2011):

– Множество доработок.

Content Downloader версии 24.98 (10.12.2011):

– Устранены ошибки в работе функции слияния двух CSV-файлов в инструменте “редактор CSV файлов”.

Content Downloader версии 24.97 (09.12.2011):

– Добавлено несколько макросов шаблона вывода (кнопка “дополнительные макросы шаблона вывода”);
– Несколько доработок и исправлений.

Content Downloader версии 24.93 (02.12.2011):

– Теперь лог парсинга (отчет) может не очищаться (опционально, по умолчанию очищается);
– Теперь можно включить/отключить скрипты в предпросмотре парсинга контента;
– Несколько доработок и исправлений.

Content Downloader версии 24.88 (29.11.2011):

– Множество доработок и исправлений.

Content Downloader версии 24.87 (27.11.2011):

– В инструменте задания границ парсинга появилась возможность выбирать другие ссылки из проекта;
– Теперь авторизация методом POST работает и через https;
– Множество изменений, дорабок и исправлений.
(more…)

Макрос {get} для функций поиск-замены

Макрос {get} может применяться в функциях поиск замены во вкладке “контент”, в функциях поиск-замены в “дополнительные настройки границ парсинга” и в макросах поиск-замены шаблона вывода.
(more…)

Обновление программы Content Downloader до версии 24.77

content downloader Скачать/обновить программу
Просмотреть весь лог изменений
Обсудить на форуме

Content Downloader версии 24.77 (27.11.2011):

– Теперь в программе можно задать 5 повторяющихся границ парсинга (спасибо Bork75).

Content Downloader версии 24.07 (26.11.2011):

– Теперь можно включить/выключить исполняемые скрипты в браузере окна задания границ парсинга;
– Добавлена поддержка загрузки картинок по https;
– Добавлен макрос шаблона вывода IMAGESPATH (задание папки или пути сохранения изображений);
– В редактор CSV файлов добавлена функция отмены последнего действия.

Content Downloader версии 24.00 (24.11.2011):

– Появилась возможность задавать повторяющиеся границы парсинга используя специальный инструмент (кнопки “SET” рядом с повторяющимися границами);
– Теперь макрос {skip} работает и для повторяющихся границ парсинга.

Content Downloader версии 23.99 (24.11.2011):

– В инструменте предпросмотра результатов парсинга CSV теперь можно просматривать полное содержимое выбранной ячейки;
– В шаблон вывода добавлен макрос DOCSNAMES_ (для задания имен файлов сохраняемых документов).

Content Downloader версии 23.98 (23.11.2011):

– Несколько доработок.

Content Downloader версии 23.97 (22.11.2011):

– Множество доработок.

Content Downloader версии 23.93 (20.11.2011):

– В шаблон вывода добавлен марокс поиск-замены [REPLACE(что заменить|на что заменить)]…[/REPLACE].

Content Downloader версии 23.88 (20.11.2011):

– Добавлена функция вывода указанного текста (или макросов шаблона вывода) в случае, если загружаемый документ окажется пустым (или не загрузится)(на панели инструментов кнопка “задать границы парсинга” – кнопка “условия”);
– Теперь в инструменте задания границ парсинга отображается сколько символов было удалено в функции поиск-замены для исходного кода;
– В инструмент задания границ парсинга добавлены кнопки: “показать начало парсинга”, “показать конец парсинга”;
– Несколько доработок и исправлений.

Content Downloader версии 23.87 (20.11.2011):

– Значения connect/read timeout теперь выставляются и для загрузки изображений, макросов шаблона вывода PHP_SCRIPT и GETMORECONTENT;
– Макрос шаблона вывода SHORT теперь удаляет переносы строк при сохранении в CSV;
– Устранены проблемы со встроенным Web-браузером в инструменте задания границ парсинга;
– Несколько доработок и исправлений.

(more…)

Обновление программы Content Downloader до версии 23.77

content downloader Скачать/обновить программу
Просмотреть весь лог изменений
Обсудить на форуме

Content Downloader версии 23.77 (19.11.2011):

– В фильры ссылок добавлены функции корректировки (удаление параметров, удаление www., удаление / на концах ссылок);
– Добавлена функция поиск-замены для загруженного кода документа при парсинге контента (срабатывает до вычисления границ парсинга);
– Множество доработок и исправлений.

Content Downloader версии 23.18 (18.11.2011):

– Доработан интерфейс и программный код.

Content Downloader версии 23.17 (17.11.2011):

– В функции поиск-замены теперь можно заменять текс на макросы шаблона вывода;
– Добалена опция connect/read timeout для сканера сайтов, парсинга контента и ссылок (меню – настройка – опции программы)(по умолчанию 30000 мс (30 секунд));
– Несколько доработок.

(more…)

Обновление программы Content Downloader до версии 23.11

content downloader Скачать/обновить программу
Просмотреть весь лог изменений
Обсудить на форуме

Content Downloader версии 23.11 (11.11.2011):

– Добавлен макрос шаблона вывода STRTOINTID (преобразование любого текста в числовой ID);
– Добавлена функция сортировки списка ссылок по алфавиту (правый клик по списку);
– Несколько доработок, изменений и исправлений.

Content Downloader версии 22.37 (03.11.2011):

– У макросов шаблона вывода PHP_SCRIPT и GETMORECONTENT добавлены опции: использовать в 1 поток/многопоточно (смотрите меню – настройка функций программы и макросов шаблона вывода – настройка макросов);
– Несколько улучшений.

Content Downloader версии 22.33 (01.11.2011):

– Значительно ускорена функция удаления дублей ссылок (правый клик по списку ссылок (в главном окне программы) – “удалить дубли”);
– Макрос шаблона вывода GETMORECONTENT теперь работает в несколько потоков (ранее, при выполнении этого макроса, остальные потоки “ожидали”);
– Несколько доработок.

Content Downloader версии 22.31 (31.10.2011):

– Добавлена опция включения/отключения макроса случайного вывода текста ({..|..|..|..});
– Множество доработок, исправлений и изменений.

Content Downloader версии 22.25 (25.10.2011):

– Доработан макрос шаблона вывода TOPRICE (теперь можно указать множитель цены);
– Исправлена функция слияния двух CSV в редакторе CSV файлов;
– В парсер Google картинок добавлена опция отключения фильтрации;
– Несколько исправлений и изменений.
(more…)