Дав себе установку на ежедневное наполнение варез поратла, при первом же посте я понял что собирать варез вручную по сети и выкладывать, делая вручную копи/паст новости, долго и нудно. Полез искать граббер для движка datalife engine по варез порталам. Нашёл Rss Grabber v. 3.0 by Kursor для граба новостей с rss лент. Во первых нуленая версия, во вторых умеет закачивать файлы на сервер для которого грабим новости, в третьих грабер сразу заработа, вотличие от многих других какие я тестировал.
По сути этот грабер это модуль для DLE. Модуль грабит новости из выбранных вами RSS каналов и публикует их у вас на сайте.
Работа грабера происходит в три этапа:
1. Собирает все новости из rss канала, если заданы начальный и конечные шаблоны идёт по ссылке на полную новость, если нужно авторизируется и собирает данные.
2. Пользователь выбирает необходимые ему новости и если нужно изменяет.
3. Сохраняет полученные новости в базе при этом если в новостях встречаются картинки и если разрешено в настройках то сливает все картинки на сервер и закрепляет за новостью.
Отличия от версии 2.3:
1. Убраны все обнаруженные баги
2. Сделан работоспособный крон.
3. Оптимизирована работа с базой
Грабить буду каждый день вручную, не используя cron. В день буду грабить только в один разде, соответственно каждый день в новый.
Loading ...