Архивы рубрики: ‘Новости’

Content Downloader: создаем сайт за 15 минут

content downloader Результат работы программы

Здравствуйте, уважаемые коллеги и просто гости нашего сайта. В этой статье я покажу вам, как можно сделать сайт любой тематики за минимальный промежуток времени и с минимальными трудозатратами. Для этого я буду использовать свою программу для парсинга, обработки и публикации контента – Content Downloader.

Для начала определимся с тематикой. Например, автомобили. Находим сайт донор: погуглив минут 5 я наткнулся на хороший автомобильный сайт с кучей грамотных статей полных картинок – http://kolesa.ru (ребята из команды kolesa.ru могут не беспокоиться: ссылку на вас оставил и потом все ваши материалы удалю с сайта). В качестве CMS я выбрал WordPress. (more…)

Обновление программы Content Downloader до версии 1.91

content downloader Скачать/обновить программу ver 1.91
Просмотреть весь лог изменений
Обсудить на форуме

В этом обновлении добавлена функция создания файла импорта в Zebrum Lite, добавлена удобная функция добавления файлов (умеет обрабатывать подкаталоги). Добавлен инструмент вырезания не нужных частей страниц по заданным границам (например, яваскрипты, различная реклама и так далее). В следующем обновлении планируется усовершенствовать функцию экспорта в CMS, ускорить работу программы и создать генератор html сайтов + многое другое. (more…)

Зебры прибегут через пару дней, они уже так близко…

content downloader - зебрыДоброго времени суток!
Работа над Content Downloader идет практически без остановок. Только что добавил функцию создания файла импорта статей в Zebrum Lite и решил ее опробовать. Для примера спарсил около 250 статей (в каждой статье имеется ссылка на первоисточник).

и вот результат

Я просто запустил парсинг, пошел налить чаю, пришел, распределил статьи по рубрикам и создал файл импорта.

Парсинг, обработку и импорт контента делал на скорую руку, так как количество времени крайне ограничено. Настройка проекта парсера, как и обработка и импорт контента, заняла всего минут 5. Большую часть времени отняла загрузка картинок на сервер.

Структура рубрик:

Обновление программы выйдет через 2-3 дня. Помимо импорта в Zebrum Lite, в программу будет добавлено несколько новых функций (автозаполнение полей описаний, меток, удаление определенных частей статей и так далее). Также будет исправлен баг с предпросмотром результатов парсинга контента.

На этом все, спасибо за внимание.

Обновление программы Content Downloader до версии 1.89 hotfix!

content downloader Скачать/обновить программу ver 1.89 hotfix!
Просмотреть весь лог изменений
Обсудить на форуме

Очень важное обновление! В нем исправлена функция парсинга ссылок, которая была нарушена в обновлении 1.87.



Список изменений:
Общие изменения:
– при сохранении файлов при парсинге, все пробелы в имени файла заменяются на символ “_”;
– устранена проблема с парсингом ссылок (отдельное и большое спасибо askjdh);
– множество незначительных изменений и багфиксов.

Изменения, касающиеся функции обработки и импорта в КМС:
– устранен баг с активностью кнопки добавления файлов после создания документа;
– добавлены инструменты для простановки тегов;
– множество незначительных изменений, нововведений и багфиксов.

Изменения, касающиеся массовой обработки файлов:
– слегка увеличена ширина и высота окна;
– добавлена панель инструментов для управления списком элементов и выделением;
– теперь, при клике на элемент дерева, без зажатой клавиши shift или ctrl выделение снимается.

Обновление программы Content Downloader до версии 1.87

content downloader Скачать/обновить программу ver 1.87
Просмотреть весь лог изменений
Обсудить на форуме

Проделана очень большая работа по созданию нового функционала. Теперь программа умеет импортировать спарсенный контент в WordPress. В следующих обновлениях будет добавлен импорт в DLE, Zebrum. В ближайшем будущем планирую добавить функции обработки контента (удаление мусора, замена ссылок, перелинковка и прочее), затем добавлю в программу синонимайзер (Smartrewriter).

Список изменений:

Общие изменения:
– теперь ссылки на картинки будут разделяться не “\”, как раньше, а правильным символом – “/”;
– теперь, при выборе опции “сохранять картинки в одну папку”, первая картинка сохраняется (ранее не сохранялась);
– исправлен баг с границами парсинга (отдельное спасибо Sah), до этого они периодически пропадали и парсилась не та часть страницы;
– теперь программа распознает теги картинок, написанные прописными буквами;
– максимальные значения длины текста во всех полях программы увеличены с 65 000 до 999999 символов;
– добавлена функция импорта контента в вордпресс.

Обновление программы Content Downloader до версии 1.80

content downloader Скачать/обновить программу ver 1.80
Просмотреть весь лог изменений
Обсудить на форуме

Теперь программа сворачивается в трей, что очень удобно. Мало того, через иконку в трее можно управлять программой. При наведении на иконку отображается прогресс парсинга. Проблемы с кодировкой koi были устранены. Было произведено много незначительных улучшений и изменений интерфейса программы.

Список изменений:

Общие изменения:
– максимальное значение длины имени файла при сохранении увеличено до 87 символов;
– при закрытии проекта границы заголовка теперь будут не пустыми, а иметь значение тега заголовка title;
– устранены проблемы с koi кодировкой, теперь все кодируется правильно;
– теперь, при сохранении статей, числовой индекс в именах файлов появляется только при совпадении имен файлов;
– поправлено сохранение некоторых настроек при закрытии программы;
– при закрытии программы все функции теперь приостанавливаются;
– в трей добавлена иконка приложения;
– теперь программа сворачивается в трей;
– теперь, когда присваиваются именам файлов заголовки статей, в эти имена могут включаться и цифры;
– множество незначительных изменений и багфиксов.

Изменения, касающиеся функции выбора директории сохранения статей:
– теперь, при открытии проводника несуществующей папки, эта папка создается и открывается проводник;
– при создании новой папки раскрывается родительская директория и выделяется нужный элемент;
– размер области выбора папок увеличен почти в два раза.

Видео мануал (инструкция) к Content Downloader – принцип работы программы

[flashvideo file=”/flv/video7.mp4″ image=”/flv/pi7.jpg” /]

скачать видео файл
1 Star2 Stars3 Stars4 Stars5 Stars (оценок: 10, средний балл: 4.30) Loading... размер файла: 19,9 mb
продолжительность видео: 8 минут 05 секунд

Краткое описание видео:
Данное видео позволяет понять принцип работы парсера. Это видео следует смотреть в первую очередь. На видео описаны следующие действия: добавление ссылок с использованием шаблона, парсинг ссылок на статьи, задание границ парсинга статьи и заголовка, парсинг статей и просмотр результата.