Парсер новостей
Парсер новостей для InstantCMS 2
Нравится
Не нравится
4870
Цена
Бесплатно
Скачать В список желаний (1)

С помощью компонента Парсер новостей, вы можете парсить новости с различных источников (на данный момент с Вести и РИА) и добавлять их на свой сайт. Есть несколько способов добавления, автоматический, ручной и по крону (Планировщик).

Автоматический - это когда при нажатии автоматом добавляются новости на сайт.

Ручной - это когда загружается форма добавления новости с уже заполненными полями и вы можете отредактировать её и нажать Сохранить.

Добавление по крону - это когда из созданных фильтров, планировщик парсера добавляет контент на ваш сайт, без вашего участия.

Парсер получает заголовок, текст и одну фотографию. Фотография загружается на ваш сайт со всеми пресетами, которые есть на вашем сайте. Из тела новости, получаем только текст, все фотографии или видео удаляются.

Фильтры

Вы можете создать фильтры, что бы фильтровать спарсенные новости. Например создаете фильтр с текстом "Москва" тогда добавляются новости связанные с Москвой или же как сейчас актуально, создаёте фильтр с текстом "Олимпиада" или "РИО" и получите новости олимпиады.

Категории

При парсинге с внешнего сайта мы получаем категории новостей, в компоненте есть удобный настройщик категорий, где вы можете указать какие новости должны попадать в какие категории.

Кэш

Что бы не грузить сервер, при парсинге, данные сохраняются в кэш, следующие загрузки происходят из кэша. Это обеспечивает быструю работу компонента.

При нажатии на кнопку Очистить кэш - данные из кэша удаляются и компонент парсит новые данные.

Как подключить дополнительные источники?

Дополнительные источники создаются платно. Перед заказом отправьте ссылку на сайт источника сюда my-instantcms@mail.ru, после чего получите ответ, получиться спарсить или нет.

Цена одного источника: 400 руб

Установка компонента

Админка - Компоненты - Установка пакет дополнения - выберите архив и нажмите "Продолжить".
На следующей странице выводиться информация о компоненте, ознакомитесь и нажмите "Установить".

Далее необходим ввести FTP данные и нажать "Продолжить"

ВНИМАНИЕ:

Поле "Путь папки сайта" по умолчанию стоить / - вам нужно прописать путь к папку вашего сайта, обычно это /public_html/ или /htdocs/

Если вы хотите установить компонент на Денвер и не знаете FTP данные, то вам надо открыть архив который скачали, внутри архива есть папка Package - загрузить данные из от туда в папку вашего сайта, например на z:\home\site.ru\www\

Лицензионное соглашение

Перед покупкой, установкой и использованием дополнений сайта My-instantCMS.Ru (далее Наш сайт) внимательно ознакомьтесь с условиями данного Лицензионного соглашения. Приобретая, устанавливая, копируя или иным образом используя расширения нашего сайта, Вы тем самым принимаете на себя условия настоящего Лицензионного соглашения и становитесь пользователем (далее Пользователь). Если Вы не согласны с условиями данного Лицензионного соглашения, Вы не можете использовать дополнений нашего сайта. Установка и использование дополнений, купленных или скаченных на нашем сайте означает Ваше полное согласие со всеми пунктами настоящего Лицензионного соглашения.

Авторские права

Все дополнения на нашем сайте, является собственностью владельца данного сайта.

При покупке дополнения, Вы получаете право на использование приобретённого только на одном сайте, если у вас несколько сайтов, необходимо купить дополнительную лицензию для каждого сайта (действуют определенные скидки).

Вы не имеете права передавать или распространять копии купленных дополнений, размещать их для скачивания на других сайтах.

Как продавать дополнения, если они больше не нужны?

Дополнения Вам больше не нужны, можно их продать, соответственно Вы теряете права на их использование. Для продажи нужно:

  • Уведомить автора дополнения о том, что продаете права на использование дополнения другому лицу.
  • Предоставить email покупателя, что бы автор смог удалить ваш email из списка покупателей, и внести другого пользователя.
  • Удалить дополнение с вашего сайта, если это готовая сборка сайта, удалить надо сайт целиком.

Деньги не возвращаются:

  • Все наши товары разработаны для версии 2, будьте внимательны, некоторые пользователи по ошибке покупают наши разработки для 1 версии (не будут работать, и адаптировать нет возможности)
  • Перед покупкой изучите товар, посмотрите видео и демо, задавайте вопросы. Мы гарантируем только заявленный функционал

Администраторы сайта оставляют за собой право внести изменения в настоящее лицензионное соглашение в любой момент.

RSS
10:38
+1
Хочу купить этот компонент сколько стоить
10:04
+1
Не знаю как у других, но лично на моем сайте, парсер регулярно (раз через раз) вешает сайт, очень долго идет загрузка при обновлении кеша, ручном запуске задачи парсера из планировщика в админке, в итоге пишет ошибку 504 Gateway Time-out и сайт падает минут на 10-20. При запуске той же задачи по cron с сервера, дублирует много раз одну и ту же последнюю новость. Задумка на самом деле очень нужная и полезная, выставил нужные фильтры, настроил cron и время жизни новостей и забыл, всегда свежие и актуальные новости на сайте, но конечно все это имеет место быть если выпрямить до конца компонент и избавиться от вышеперечисленных багов.
10:16
+1
На данный момент есть проблема с кроном, т.е. если вы заходите на страницу планировщика и нажмете Запустить сейчас, то новости добавляются нормально и проблем нет, но если задача активна и запускается по времени, то тогда возникают проблемы с дублированием, по этому пока не оставляйте задачу активной.
Алишер
15:01
как его приобрести?
15:41
+1
компонент могут бесплатно получить те, кто делал у нас на сайте покупки на сумму больше 4 000 рублей
15:44
а как купить?
15:48
www.youtube.com/watch?v=nHFf7r9TkLo
это ваш компонент?
15:48
my-instantcms@mail.ru а это ваша почта?
15:54
мы покупали у вас компонент новый вывод, почта vkvcorporation.pro@mail.ru
парсер новостей как нам купить?
15:56
+1
Парсер новостей не продается, так как есть пару багов, но бесплатно тем кто делал у нас покупки больше 4000 руб
16:01
планируем купить шаблон compant,
ну скиньте парсер мы потестируем или купим
16:09
а также планируем приобрести расширение доски объявлений
vkvcorporation
11:30
продайте парсер новостей
15:50
+1
Парсер с сайта РИА не работает, так как сайт перешел на https
По ищу другие варианты
09:54
+1
Обновил компонент
Что нового?
— Исправлен баг с кроном
— Исправлен баг с дублирующем контеном
— РИА перешел в https — по этому в место него теперь сайт Интерфакс
— Вроде исправил баг с полями (не проверял), когда у вас поля от сторонних разработчиков
— Добавил возможность удалить/изменить фильтр prnt.sc/cbkj7h
— Другие мелкие исправления
Олег
21:12
для покупавших сборку городского портала обновку высылаете?
22:17
+1
Да, отправил по почте
13:59
+1
У кого сайт зависает на вкладке Интерфакс, откройте файл \system\controllers\mypars\backend.php и удалите строку 131

if(!$data && $parsing){$this->getInterfax($filtr);}

и файл \system\controllers\mypars\model.php строка 354
22:54
+1
Сижу локти кусаю, сейчас нет у меня ресурса где по тестировать такую нужную вещь. Грустно.
23:18
+1
Если что, пишите отправлю архив)
Евгений
19:32
День добрый! покупал Карту городских проблем ( все просто супер)- это 2000,, куплю банер в тексте -это еще 500, + 4 источника по 400 и вы вышлете пассер новостей? :)
21:04
Здравствуйте, да можно
Rasha
18:03
Доброго времени, хочу купить или взять для теста парсер новостей.
Готов купить источники для парсера короче мне он нужен
что для этого нужно и сколько стоит
16:21
В следующих версиях будут возможности парсинга по https, выборочный парсинг ( prntscr.com/cpabv1 ), сменил библиотеку парсера и мелкие исправления
Олег
19:54
что-то у меня интерфакс вообще не парсит
21:36
Парсер заново переписывается, сейчас интерфакс удален, так как научился парсит с https по этому вернул Ria новости
Олег
13:10
А можете на почту скинуть обновку?
13:22
Когда доработаю, сейчас занять другой разработкой
Oleg
00:26
Обновленный парсер не хочет работать.Пусто.
00:35
Старую версию удалили?
Oleg
13:40
Все удалил.Кэш чистил.Но ни на РИА ни в вестях ничего нет.Пустой блок.Может надо было еще планировщик настроить?
13:41
Можете дать доступ к админке в ЛС?
14:03
Что-то написать не могу, колесико крутится и все… Глючит переписка у меня.
14:10
Да есть такая ошибка, недавно обновил сайт до 2.6.1, наверно что то произошло с Неомессенджер, попробую исправить
19:18
Отправил на почту сообщение, когда ответите?
20:59
Ответил
MZ
12:14
А как его скачать?
12:56
компонент могут бесплатно получить те, кто делал у нас на сайте покупки на сумму больше 4 000 рублей
MZ
14:24
Бесплатна одна лицензия на один сайт или без огр. и сколько источников у бесп версии?
14:26
Без ограничении.
Бесплатных источников два, вести и РИА
Роман
19:40
Как купить?
19:48
Не продается, но думаю скоро бесплатно получит те, кто активно участвует в нашей группе ВК
Роман
22:53
Что значит активно участвовать?
23:24
+1
Пока что лайк, репост, комментарий.
Или периодический будет какой то простой конкурс, где случайно выберется победитель
17:12
+1
Компонент обновлен, есть интеграция с FlowCrawler см. видео
Aleksandr
22:22
Здравствуйте! хочу купить парсер новостей, плюс сразу заказать около 5 источников парсинга… жду ответа!
Заранее спасибо!
10:24
Здравствуйте, пишите сюда my-instantcms@mail.ru
Александр
18:02
Здравствуйте, интересует этот парсер новостей, можно ли добавить в него поле — Город, которое будет заполняться из парсера. Так как необходим вывод по городам. А как его реализовать неизвестно… И ещё, хочется прикрутить его к ИнстантМапс, чтобы при смене города менялся вывод новостей, а для этого нужно парсить в другую таблицу новостей — «Новости объектов». Есть возможность настроить его под ИнстантМапс? И сколько это будет стоить?
11:40
Здравствуйте, парсер добавляет новости только к типу контента news. Прикрутить к мапсу не получиться
Дмитрий
00:46
Здравствуйте. парсинг по крону не происходит. Ошибка появляется в настройках фильтров в виде: Notice: Undefined index: title in /var/www/xxxxx/data/www/xxxxx/templates/default/controllers/parsing/backend/filter.tpl.php on line 6
12:10
Здравствуйте. Что бы парсинг по крону работал. надо хотя бы 1 фильтр создать и в Опциях поставить галочку на источники.
Это ошибка когда появляется?
Дмитрий
12:34
Все сделано. А ошибка отображается в окне настройки фильтр-слова(написал выше). Я так понял из за этой ошибки планировщик не срабатывает. Остальные задания работают, а парсинг нет.
13:49
Попробуйте переустановить
12:45
Установил парсер, при попытке зайти в настройки компонента их админки, выводит ошибку БД:

Ошибка в запросе БД:

Таблица 'host1639526_blogpost.bp_con_news_fields' не существует
SELECT i.id, i.options
FROM bp_con_news_fields i
WHERE (i.name = 'photo')
LIMIT 1

Последние вызовы:

cmsModel->getItem() @ /system/core/model.php: 1366
cmsModel->getItemByField() @ /system/controllers/parsing/backend.php: 19
backendParsing->__construct() @ /system/controllers/admin/frontend.php: 336
admin->loadControllerBackend()
call_user_func_array() @ /system/core/action.php: 29
cmsAction->__call() @ /system/controllers/admin/actions/controllers_edit.php: 34
actionAdminControllersEdit->loadControllerBackend() @ /system/controllers/admin/actions/controllers_edit.php: 34
actionAdminControllersEdit->run()
call_user_func_array() @ /system/core/controller.php: 507
cmsController->runExternalAction() @ /system/core/controller.php: 425
cmsController->runAction()

12:46
Скорей всего у Вас на сайте отсутствует тип контента Новости (news)
Павел
14:36
Подскажите, в каком файле поменять процесс добавления новости в БД, нужно произвести некоторые операции перед тем, как новость будет добавлена в БД
14:40
Файл \system\controllers\content\actions\item_add.php
Павел
15:03
Хорошо, как мне вырезать перед добавлением в БД из полной части то, что берется для анонса?
15:07
Попробуйте воспользоваться ручным добавлением в парсере
Павел
07:51
И какой тогда смысл от парсера? В ручную я и с источника могу залить =((
Загрузка...