Автоматический - это когда при нажатии автоматом добавляются новости на сайт. Добавление по крону - это когда из созданных фильтров, планировщик парсера добавляет контент на ваш сайт, без вашего участия

Парсер новостей

Парсер новостей

С помощью компонента Парсер новостей, вы можете парсить новости с различных источников (на данный момент с Вести и РИА) и добавлять их на свой сайт. Есть несколько способов добавления, автоматический, ручной и по крону (Планировщик).

Автоматический - это когда при нажатии автоматом добавляются новости на сайт.

Ручной - это когда загружается форма добавления новости с уже заполненными полями и вы можете отредактировать её и нажать Сохранить.

Добавление по крону - это когда из созданных фильтров, планировщик парсера добавляет контент на ваш сайт, без вашего участия.

Парсер получает заголовок, текст и одну фотографию. Фотография загружается на ваш сайт со всеми пресетами, которые есть на вашем сайте. Из тела новости, получаем только текст, все фотографии или видео удаляются.

Фильтры

Вы можете создать фильтры, что бы фильтровать спарсенные новости. Например создаете фильтр с текстом "Москва" тогда добавляются новости связанные с Москвой или же как сейчас актуально, создаёте фильтр с текстом "Олимпиада" или "РИО" и получите новости олимпиады.

Категории

При парсинге с внешнего сайта мы получаем категории новостей, в компоненте есть удобный настройщик категорий, где вы можете указать какие новости должны попадать в какие категории.

Кэш

Что бы не грузить сервер, при парсинге, данные сохраняются в кэш, следующие загрузки происходят из кэша. Это обеспечивает быструю работу компонента.

При нажатии на кнопку Очистить кэш - данные из кэша удаляются и компонент парсит новые данные.


Как получить?

На данный момент компонент могут бесплатно получить те, кто делал у нас на сайте покупки на сумму больше 4 000 рублей. Они могут его тестировать, изучать функционал и если всё устраивает, могут заказать дополнительные источники, т.е. если у вас городской портал, вы можете заказать сайт администрации своего города или какой нибудь новостной сайт, что бы парсить от туда новости.

Цена одного источника: 400 руб

Нравится
Не нравится
Идеальный выбор начинающих и небольших сайтов
10:38
+1
Хочу купить этот компонент сколько стоить
10:04
+1
Не знаю как у других, но лично на моем сайте, парсер регулярно (раз через раз) вешает сайт, очень долго идет загрузка при обновлении кеша, ручном запуске задачи парсера из планировщика в админке, в итоге пишет ошибку 504 Gateway Time-out и сайт падает минут на 10-20. При запуске той же задачи по cron с сервера, дублирует много раз одну и ту же последнюю новость. Задумка на самом деле очень нужная и полезная, выставил нужные фильтры, настроил cron и время жизни новостей и забыл, всегда свежие и актуальные новости на сайте, но конечно все это имеет место быть если выпрямить до конца компонент и избавиться от вышеперечисленных багов.
10:16
+1
На данный момент есть проблема с кроном, т.е. если вы заходите на страницу планировщика и нажмете Запустить сейчас, то новости добавляются нормально и проблем нет, но если задача активна и запускается по времени, то тогда возникают проблемы с дублированием, по этому пока не оставляйте задачу активной.
Алишер
15:01
как его приобрести?
15:41
+1
компонент могут бесплатно получить те, кто делал у нас на сайте покупки на сумму больше 4 000 рублей
15:44
а как купить?
15:48
www.youtube.com/watch?v=nHFf7r9TkLo
это ваш компонент?
15:48
my-instantcms@mail.ru а это ваша почта?
15:54
мы покупали у вас компонент новый вывод, почта vkvcorporation.pro@mail.ru
парсер новостей как нам купить?
15:56
+1
Парсер новостей не продается, так как есть пару багов, но бесплатно тем кто делал у нас покупки больше 4000 руб
16:01
планируем купить шаблон compant,
ну скиньте парсер мы потестируем или купим
16:09
а также планируем приобрести расширение доски объявлений
vkvcorporation
11:30
продайте парсер новостей
15:50
+1
Парсер с сайта РИА не работает, так как сайт перешел на https
По ищу другие варианты
09:54
+1
Обновил компонент
Что нового?
— Исправлен баг с кроном
— Исправлен баг с дублирующем контеном
— РИА перешел в https — по этому в место него теперь сайт Интерфакс
— Вроде исправил баг с полями (не проверял), когда у вас поля от сторонних разработчиков
— Добавил возможность удалить/изменить фильтр prnt.sc/cbkj7h
— Другие мелкие исправления
Олег
21:12
для покупавших сборку городского портала обновку высылаете?
22:17
+1
Да, отправил по почте
13:59
+1
У кого сайт зависает на вкладке Интерфакс, откройте файл \system\controllers\mypars\backend.php и удалите строку 131

if(!$data && $parsing){$this->getInterfax($filtr);}

и файл \system\controllers\mypars\model.php строка 354
22:54
+1
Сижу локти кусаю, сейчас нет у меня ресурса где по тестировать такую нужную вещь. Грустно.
23:18
+1
Если что, пишите отправлю архив)
Евгений
19:32
День добрый! покупал Карту городских проблем ( все просто супер)- это 2000,, куплю банер в тексте -это еще 500, + 4 источника по 400 и вы вышлете пассер новостей? :)
21:04
Здравствуйте, да можно
Rasha
18:03
Доброго времени, хочу купить или взять для теста парсер новостей.
Готов купить источники для парсера короче мне он нужен
что для этого нужно и сколько стоит
16:21
В следующих версиях будут возможности парсинга по https, выборочный парсинг ( prntscr.com/cpabv1 ), сменил библиотеку парсера и мелкие исправления
Олег
19:54
что-то у меня интерфакс вообще не парсит
21:36
Парсер заново переписывается, сейчас интерфакс удален, так как научился парсит с https по этому вернул Ria новости
Олег
13:10
А можете на почту скинуть обновку?
13:22
Когда доработаю, сейчас занять другой разработкой
Oleg
00:26
Обновленный парсер не хочет работать.Пусто.
00:35
Старую версию удалили?
Oleg
13:40
Все удалил.Кэш чистил.Но ни на РИА ни в вестях ничего нет.Пустой блок.Может надо было еще планировщик настроить?
13:41
Можете дать доступ к админке в ЛС?
14:03
Что-то написать не могу, колесико крутится и все… Глючит переписка у меня.
14:10
Да есть такая ошибка, недавно обновил сайт до 2.6.1, наверно что то произошло с Неомессенджер, попробую исправить
19:18
Отправил на почту сообщение, когда ответите?
20:59
Ответил
MZ
12:14
А как его скачать?
12:56
компонент могут бесплатно получить те, кто делал у нас на сайте покупки на сумму больше 4 000 рублей
MZ
14:24
Бесплатна одна лицензия на один сайт или без огр. и сколько источников у бесп версии?
14:26
Без ограничении.
Бесплатных источников два, вести и РИА
Роман
19:40
Как купить?
19:48
Не продается, но думаю скоро бесплатно получит те, кто активно участвует в нашей группе ВК
Роман
22:53
Что значит активно участвовать?
23:24
+1
Пока что лайк, репост, комментарий.
Или периодический будет какой то простой конкурс, где случайно выберется победитель
17:12
+1
Компонент обновлен, есть интеграция с FlowCrawler см. видео
Aleksandr
22:22
Здравствуйте! хочу купить парсер новостей, плюс сразу заказать около 5 источников парсинга… жду ответа!
Заранее спасибо!
10:24
Здравствуйте, пишите сюда my-instantcms@mail.ru
Загрузка...

Новые комментарии

ВячеславМультиязычность для InstanCMS 2.5 1 день назад
Благодарю что натолкнули на решение и компонент не придётся удалять Компонент нужный можно сказать н...
ВячеславМультиязычность для InstanCMS 2.5 1 день назад
Интересная ситуация в режиме отладки поля удалились и ни какой ошибки не выдало
включите отладку, тогда покажет ошибку в место 503
ВячеславМультиязычность для InstanCMS 2.5 1 день назад
ошибка 503 при попытке удаления полей
что за ошибка? покажите текст ошибки
ВячеславМультиязычность для InstanCMS 2.5 1 день назад
У меня стоит последняя версия компонента и ошибка не исчезает попытка переустановить ни к чему не ...
Да, если разбираетесь в css
Какая версия компонента? в последней версии это проблема решена. Скачать от сюда http://addons.insta...
Попробуйте загрузить файлы из архива из папки /templates/default/ в папку /templates/compact-mobil
ЕвгенийБесплатный шаблон для InstantCMS2 2 дня назад
Подскажите. Можно ли сделать верхнюю часть (там где бегущая строка и авторизация) прозрачной? А так...

Кошелек для оплаты

WebMoney: R380642925354 | Z170841179282

Яндекс деньги: 410012099984285

Qiwi: +79269354436

Счет сбербанк: 40817810640001679889

* если после оплаты товар не получили, проверьте папку Спам