Loading...

Kyl-parser - модуль парсера контента для DLE


Версия модуля: 1.0
Версия DLE: 10.x - 11.x отличная совместимость. В версиях выше пока есть проблемы с оформлением интерфейса. скриншот
Вообще модуль не зависим и работает со всеми версиями DLE, проблема может быть только в отображении модуля.
Требования: IonCube Loader на хостинге, PHP не ниже 5.6
Инструкция внутри архива.

Модуль Kylparser предназначен для парсинга контента с других сайтов.

Возможности модуля

1. Создание шаблонов для парсинга. То есть можно создать несколько шаблонов для парсинга нескольких сайтов одновременно.
2. Возможность отключать и включать шаблоны.
3. Ведение логов. Каждый лог достигая 3 Мб, стирается и перезаписывается заново.
4. Парсинг через прокси.
5. Возможность парсить новости / статьи с мгновенной публикацией их на сайт или добавлением их на модерацию.
6. Можно указывать промежуток (в секундах) между обходом страниц на сайте доноре.
7. Распределение категорий сайта донора с категориями на сайте с установленным модулем, то есть с вашим.
8. Выбор селекторов в парсере: заголовка, постов, навигации, тегов, ключевых слов, описание, тегов, изображений, главное изображения поста...
9. Указание, на какой странице парсинга следует останавливать парсер и переходить к следующей категории на сайте или ледующему шаблону.
10. Поиск и замена в теле поста по регулярному выражению.
11. Поиск и замена или удаление атрибутов элементов в теле поста.
12. Удаление элементов.

 
 

Особенности парсера

Парсер работает по крону. Крон задается как по протоколу HTTP, так и простым вызовом PHP-скрипта. Разница в том, что php-скрипт может вызвать любой посетитель, зная адрес скрипта, а вызов по протоколу сопровождается добавлением hash параметра, который указывается к конфигурационном файле модуля.
Парсер загружает все изображения в папку uploads в папку с датой.
При повторном обходе новостей, парсер проверяет новости по заголовку. Если заголовок найден в базе, то загрузка изображений и замена статей не происходит. Планирую в следующей версии добавить возможность включить перезапись постов, думаю эта штука будет полезной.

Обращаю ваше внимание на то, что модуль закодирован с помощью IonCube, поэтому уточните на своем хостинге, установлен ли на нем IonCube Loader. Как правило он стоит почти на каждом хостинге.

Перед покупкой советую протестировать демо версию и сразу же попробовать спарсить нужный вам сайт, так как деньги я не возвращаю!
Что бы получить доступ к демо-версии, вам нужно зарегистрироваться в системе тикетов и написать с просьбой дать доступ.
Поддержка модуля ведется в этой же системе.
Так как модуль закодирован, что бы исправить какой-то баг, мне нужно тратить деньги на повторное кодирование. Поэтому все баги я исправляю в свободное время, когда планирую выпускать обновление.
Если Вам срочно нужно исправить какой-то баг или добавить какой-то функционал, договаривайтесь со мной лично. Если я найду время, и мы сойдемся в цене, то нет проблем.

Поэтому я ещё раз настоятельно рекомендую тестировать модуль перед покупкой.

Свои идеи и пожелания по улучшению можете писать как в комментариях, так и на странице поддержки.
В скайпе я поддержку не веду!


Цена: 3700 руб.



Автор: Kylaksizov
Поделиться:

    • bowtiesmilelaughingblushsmileyrelaxedsmirk
      heart_eyeskissing_heartkissing_closed_eyesflushedrelievedsatisfiedgrin
      winkstuck_out_tongue_winking_eyestuck_out_tongue_closed_eyesgrinningkissingstuck_out_tonguesleeping
      worriedfrowninganguishedopen_mouthgrimacingconfusedhushed
      expressionlessunamusedsweat_smilesweatdisappointed_relievedwearypensive
      disappointedconfoundedfearfulcold_sweatperseverecrysob
      joyastonishedscreamtired_faceangryragetriumph
      sleepyyummasksunglassesdizzy_faceimpsmiling_imp
      neutral_faceno_mouthinnocent

В корзине: 0 шт. 0 руб.
Моя группа в телеграме
Отключите расширение AdBlock на нашем сайте!

Собеседники

Переписка

Нименование Количество Цена / 1 шт.
Всего: 0 руб.