Content Downloader X1 – универсальный парсер контента

content downloader1 Star2 Stars3 Stars4 Stars5 Stars (оценок: 213, средний балл: 4.58)

Loading...

скачать/обновить программу Ver 11.1.0000108 (15.02.2017)
просмотреть весь лог изменений
экспресс-курс
Лицензионное соглашение (рекомендуем ознакомиться!)
скачать демо-версию

Если интернет – ваша работа, то Content Downloader должен стать вашими руками ©

CD X1

Купить Content Downloader ♥
Различия типов лицензий: Start, Standard, ULTIMATE
Системные требования
Дополнительная информация
Artwork

Пожалуйста, посмотрите демонстрационное видео (не забыв выбрать качество HD в плеере):




Описание универсального парсера Content Downloader:

Content Downloader – профессиональная программа, предназначенная для парсинга любой информации с любых сайтов (где это вообще возможно)

Content Downloader может применяться для:
Парсинга товаров интернет-магазина в таблицу CSV (с любым требуемым набором столбцов на выходе)
Парсинга статей с картинками и файлами (например, файлами торрентов, флеш-игр или рефератов) в txt или htm форматы
– Парсинга телефонных номеров, e-mail адресов или любой другой контактной информации (в CSV, txt или html, как вам угодно)
– Парсинга скрытой информации, доступной только после клика, например, на кнопку “показать номер” или “показать контактные данные” (для этого требуется тип лицензии ULTIMATE, включающий в себя приложение WBApp, которое и будет имитировать клики по кнопкам)
– Парсинга скрытой информации, доступной после авторизации;
– Парсинга любых, удовлетворяющих заданным фильтрам, ссылок с сайта (до 1 миллиона)
– Парсинга любых частей кода WEB-документов и их вывод в нужном для вас формате
– Парсинга XML-карт сайтов

Парсер является универсальным! Перечислять полный список его областей применений можно очень долго, так как он ограничен лишь воображением…

Принцип работы Content Downloader очень удобен, эффективен и прост: вы указываете программе (в HTML-коде страницы), с каких частей веб-страниц брать данные, и в каком формате их выводить. Если вы хотите ознакомиться с этим более детально – пожалуйста кликните сюда.

Некоторые дополнительные возможности парсера:
– Многопоточность
– Авторизация через передачу cookies из IE или через POST-Запрос
– Возможность задать любые cookies
– Возможность задавать любой user agent (даже менять их при парсинге)
– Возможность использовать список прокси (в том числе и SOCKS с авторизацией)
– Возможность задавать паузу между запросами и изменять количество потоков
– Возможность обработки данных непосредственно в процессе парсинга
– Загрузка файлов и картинок на ваш FTP-сервер прямо при парсинге контента
– Автоматическая загрузка результирующего CSV-файла на FTP-сервер после процедуры парсинга контента
– Возможность парсить разом огромное количество характеристик товаров (только для ULTIMATE-версий)
– Возможность отправки данных в базу MySQL сразу при парсинге
– Возможность подключения собственных PHP-скриптов для обработки данных при парсинге контента
– Возможность парсить через Internet Explorer (DOM) (с поддержкой выполнения различных скриптов);

Варианты сохранения данных:
– В один файл/в несколько файлов
– Расширения: CSV (с любыми заданными столбцами), htm, txt, php, MySQL

Поддерживаемые кодировки парсинга: Windows-1251, koi, utf-8
Поддерживаемые кодировки сохранения контента: Windows-1251, utf-8, utf-8 без BOM

Также в программе есть возможность создать xml файл импорта для WordPress из файлов htm или txt с диска компьютера.

Для более углубленного ознакомления с универсальным парсером Content Downloader вы всегда можете просмотреть материалы системы помощи.

ElcestarTheElementalMaster

С уважением к вам, администрация сайта…

Вы можете пропустить до конца и оставить ответ. Pinging в настоящее время не доступны.

Есть 1,173 коммент. к теме: “Content Downloader X1 – универсальный парсер контента”

  1. Тимур says:

    Здравствуйте, в каком виде сохраняются картинки с сайта при закачке товаров в csv?

    • admin says:

      Здравствуйте.

      Сохраняются в папку рядом с CSV. В ячейку CSV записывается имя файла сохраненной картинки.

      • Тимур says:

        я посмотрел хелпы – там есть функция сохранения имени файлов, а можно сохранить ссылку на эту картинку? Мне для закачки товаров нужна только ссылка на большую картинку.

  2. Евгений says:

    Здравствуйте. Подскажите, пожалуйста, можно ли будет так настроить программу. Есть сайт интернет каталог, с карточками товаров. Помимо описания товара, которое присутствует всегда, есть табы, типа характеристики, скриншоты и т.п. Эти табы, при переключении подгружаются ДИНАМИЧЕСКИ. Интересует таб скриншоты. Они также соответственно подгружаются динамически. Подгружаются картинки небольшого размера. При нажатии для увеличения открывается окно какого-нибудь фотохранилдища типа radicalfotо и т.п. и там уже большой размер картинки. Можно ли будет выполнить настройку для автоматического выдирания большой и маленькой картинки при таких условия ? Спасибо

  3. Сергей says:

    Здравствуйте.

    Подскажите, пожалуйста, столкнулся с проблемой парсинга некоторых областей сайта ***.
    Проблема заключается в том, что в html не находит границы для таких параметров как Страна, Режиссер, Актеры, Годы выпуска, Жанр.
    Наглядный пример на странице ***

    Если у вас есть возможность, подскажите, пожалуйста.

  4. Вероника says:

    Добрый день! А вы сами не берете заказы по скачиванию контента?

  5. Александр says:

    Здравствуйте, скажите пожалуйста есть какой то инструмен что бы спарсить характеристики товаров с https bellinimebel com ua/product/mebel-dlya-spalni/avrora-krovat/#product-description Но спарсить так, как спарсил бы инструмент [VERTTABLE] если бы характеристики были в таблице. Т.е. Наименование характеристик в шапке а значения с подобных страниц построчно в csv.

    Спасибо

    • admin says:

      Здравствуйте.

      Макрос [DYNAMICVALUES] (http://sbfactory.ru/cd/?p=2170)

      Пожалуйста, примите к сведению: Вопросы по функционалу программы задаются на форуме.

      Спасибо!

      • Александр says:

        Спасибо, задал здесь, так как форум раньше был закрыт для сообщений, а сейчас не посмотрел, что его опять открыли.

  6. samalov says:

    Планирую купить Content Downloader ULTIMATE. У меня есть возможность использовать программу на OS Windows7 32-bit.
    В системных требованиях указано, что рекомендуется программу запускать на OS Windows7 64-bit. Есть ли какие ограничения при запуске программы на OS Windows7 32-bit? Что-то не будет работать в программе?

    • admin says:

      Здравствуйте.

      В 64-бит системах процессам больше памяти выделяется. Если не планируете парсить более миллиона ссылок за раз, ограничений нет.

      Спасибо!

  7. Дмитрий says:

    Здравствуйте, пытыюсь настроить Content Downloader ULTIMATE, но не могу найти макрос для вывода количества отработанных повторяющихся границ. Существует ли он? И можно в контенте сайтов искать с текста слова по морфологическому признаку?

  8. kurales says:

    Здравствуйте, хотелось бы узнать, есть ли какие то решения при ситуации когда парсишь товар с разных сайтов и может получится ситуация, что один и тот же товар с разных сайтов, но называется по разному к примеру “зубная щетка” и “щетка зубная”?

    • admin says:

      Здравствуйте.

      Пока нет и по возможной реализации этого сейчас тоже ничего не скажу.

      С уважением к вам, Сергей.

  9. Дмитрий says:

    Здравствуйте, Сергей!

    Я уже 5 лет жду когда ваша программа будет под Linux. Вы планируете добавить поддержку Linux или нет?

    Может есть какие-то другие сложности или просто лень?
    Есть парадокс: люди не хотят делать программы под linux потому что мало людей им пользуются, пользователи не хотят переходить на линукс потому что на нем мало программ. Это касается и игр. Пора разорвать этот порочный круг.!! Спасибо. Верим. Надеемся. Ждем.

  10. Ольга says:

    1. Парсить характеристики в отдельные столбцы возможно только версией ULTIMATE?
    2. Что предусмотрено при установки блоков со стороны донора?

    • admin says:

      Здравствуйте.

      1) Когда характеристик не много (до 50 и они ОДНОТИПНЫЕ) их можно парсить любой версией (функции версии ULTIMATE позволяют собирать сотни РАЗНОТИПНЫХ характеристик товаров с авто-распределением их по столбцам таблицы CSV, вот посмотрите мануал http://sbfactory.ru/cd/?p=2170);

      2) Чтобы избежать временного бана от сайтов можно снизить количество потоков до 1 и выставить паузу между запросами (это сработает практически везде, но в ущерб скорости сбора данных) либо использовать список качественных прокси (в окне ctrl+r). Сразу скажу, что сайты корпораций типа Google уже забанили множество (даже платных) прокси.

      С уважением к вам, Сергей.

  11. Сега says:

    Можно ли парсить инфу с job-mo ru через него?

  12. Руслан says:

    Здравствуйте, скажите вы сможете доработать, чтобы экспорт был еще XML?

  13. Вова says:

    Здраствуйте, после просмотра экспрес курса не совсем понятен момент с парсингом именно каталога товаров на сайте, надо все ссылки на товары загружать ручками? Или будет достаточно указать путь site.ru/catalog/ ,ну а с самой карточки товара непосредственно прописать все границы, после добавления пути до каталога товаров.

    • admin says:

      Здравствуйте.

      Изучите материалы более подробно, там все это пояснено.

      С уважением к вам, Сергей.

Написать комментарий

Пожалуйста, ознакомьтесь с правилами комментирования (почему некоторые комментарии могут быть удалены?!)

Добавить изображение к комментарию (jpg)