Как реализовать парсинг новостей с другого сайта?

Подскажите, как сделать парсинг новостей с другого сайта так, чтобы материал выводился с картинками.
Нашел только getFeed, который берет новости из RSS-лент, выдаёт сухой текст и ссылку на источник, без изображений.
И есть ли вообще возможность автоматически создавать материал для каждой новости?
MODx Revo 2.3.1

Александр

05 декабря 2015, 12:19

3 079

Комментарии: 19

Александр

06 декабря 2015, 19:09

Может какое-то готовое решение есть?

Abu

06 декабря 2015, 22:16

Если готовы быть бета-тестером, могу скинуть довольно сырое решение (откройте доступ к личным сообщениям).

Александр

07 декабря 2015, 03:39

Готов, открыл почту.

Воеводский Михаил

06 декабря 2015, 21:51

Возможность есть. Необходимо писать свой парсер.

Александр

07 декабря 2015, 03:40

Сколько будет стоить такая разработка? и по времени сколько займет?

Воеводский Михаил

07 декабря 2015, 10:14

Без деталей ответа на этот вопрос никогда не будет.
Или будет из серии «от 5 000 до 500 000 руб., от 1 дня до полугода». Понятно, что это очень утрированно :)

Сергей Шлоков

07 декабря 2015, 10:28

Мне кажется 1000 руб. вполне приемлемая цена.

Воеводский Михаил

07 декабря 2015, 10:32

Не соглашусь. Все зависит от дополнительных требований.
Запорожец и BMW 7 — обе являются машинами. Вот только отличаются во всем, кроме факта наличия двигателя и 4-х колес. Здесь то же самое, ты прекрасно понимаешь эту разницу.

Сергей Шлоков

07 декабря 2015, 10:40

Я имел ввиду дополнение, а не заказная разработка. Задача парсинг новостей, а не всего сайта. Используя твою метафору — стоит задача перевезти чемодан из точки А в точку Б. Не имеет значения на чем. Можно и пешком (вручную новости переносить). Главное доставить.
П.С. Вообще задача интересная.

Воеводский Михаил

07 декабря 2015, 10:45

Если дополнение, то да, соглашусь с 1000 руб.
Продолжая метафоры — может быть ручная женская сумочка, а может быть и гора чемоданов. И вот тут уже имеет значение метод доставки из точки А в точку Б. Мы же не знаем подробностей на данном этапе.

Александр

08 декабря 2015, 20:56

Хорошо ) сформулирую подробнее
Нужно дополнение, которое сможет:
— взять из указанной rss-ленты изображения, тексты и (в идеале) анонсы новостей
— автоматически создать материал в заранее указанный раздел сайта и опубликовать его.

Также нужно:
— возможность указывать css-селекторы из которых требуется взять материал.
— возможность указывать теги, которые надо вырезать из спарсенной новости (лишние ,и т.д.)
— возможность настраивать шаблон, в который будет вставляться новость.
— (необязательно) возможность настройки частоты публикации новостей.

По-хорошему, надо один раз настроить несколько rss-лент и забыть, чтобы все новости сами публиковались на сайте.