RSS Grabber

Здравствуйте!
есть скрипт для другой CMS (мой Smiley).

RSS Grabber 1.3.1

+доработан алгоритм загрузки полного содержимого и картинок
+добавлена защита от повторного запуска граббера (исключает дубли новостей)
+более гибкая настройка формирования анонса
+возможность импорта/экспорта настроек лент. после импрота скорректируйте настройки под свои нужды (частота обновления, имя пользователя и т.д.)

RSS Grabber 1.3

+возможность сохранять контет в новости либо в статьи
+возможность чтения текста только для зарегистрированых пользователей
+граббер теперь отправляет заголовки User-Agent (Mozilla), Referer (стартовая страница) и Cookies, что позволяет ему меньше выделяться среди обычных пользователей.
+возможность сделать в анонсе статьи превью картинки из полного текста статьи
+обратный порядок чтения ленты (от старых к новым)
+новые настройки в админке


RSS Grabber 1.2

Возможности:
- контент пишет в Новости
- контент раскладывает по категориям, темам ))
- определяет категорию, если она есть в ленте
- читает краткий и полный текст статьи
- картинки заливает на сервер
- накладывает водяной знак
- заменяет/удалят фрагменты контента

Админка:
- добавление/редактирование/удаление фидов
- настройка категории, темы, отображения на главной, имени пользователя для каждого фида
- настройка периодичности обновления фида
- настройка чтения полного текста статьи
- настройка удаления/замены фрагментов контента
- настройка наложения водяного знака (координаты, угол наклона, цвет, размер шрифта)

цена 120wmz
обновления, консультации, поддержка - бесплатно.

Граббер работает автоматически без крона. Для работы нужен CURL или Sockets. Работает на PHP5 и PHP4

Препишу, если нужен кому-то для Joomla такой на тех же условиях?

прошу писать здесь или в ЛС

 

Ответ: RSS Grabber

сорри за недоверие, но чем докажешь, что не загонишь нулёный скрипт малуса и тютю? выложил бы хоть ссылу на демо, что ли...

 

Ответ: RSS Grabber

могу примеры работы в личку выслать. а демо как показать? его только в админке видно.
если можно здесь ссылки на другие CMS постить дам родную тему - там отзывы есть. или в личку.


а что за скрипт малуса? где можно глянуть?

 

Ответ: RSS Grabber

Тема будет снесена как оффтоп в ближайшее время если в посте автора не появится портфолио на другие его разработки на Joomla либо ссылка на демо его работающего компонента граббинга для Joomla.

 

Ответ: RSS Grabber

прошу не так жестко. Не хочу делать дурную работу - вот и спрашиваю. У пользователей Joomla есть интерес к этому модулю? могу показать только результаты работы модуля. могу скрин админки выложить.

ПС. для Joomla пока не писал. возможно это и будет старт.

 

Ответ: RSS Grabber

сделай скрипт с английским интерфейсом, под 1.0.Х и 1.5.Х, выложи на юмла.орг и загоняй его эдак по 35$. глядишь, и люди потянутся.

давай давай
скрипт малуса тут: http://www.newsgrabberjc.ru/

моё имхо - граббинг для ооочень ленивых, которых результат граббинга не особенно волнует. я сам на сплогах затачиваюсь, поэтому проблема граббинга стояла джостко. перепробовал всё, что есть и чего нет. пришёл к выводу, что продуктивней всего использовать связку rss2mail и bot_contentbymail - максимум по скорости и контролю качества.

 

Ответ: RSS Grabber

http://www.slaed.net/forum/index.php?showtopic=14387
вот. там примеры, отзывы клиентов.

насчет качества - настройки очень гибкие - можно сделать лучше, чем в оригинале

 

Ответ: RSS Grabber

линк битый (пробел убирал).

основная проблема грабберов - неуникальный контент. я не очень могу себе представить, чтоб граббер мог пересчитывать шинглы и употреблять синонимы. а иначе смысла мало. а вот если реализуешь - выдадим медаль почётного гуглоборца. погугли насчёт шинглов и синонимии - может надумаешь чего.

 

Ответ: RSS Grabber

http://www.newsgrabberjc.ru/
хороший скрипт.

есть похожесть в функционале. но мы еще растем ))
+обновления бесплатны

 

Ответ: RSS Grabber

Заинтересованность есть, вот только финансировать разработку "с нуля" врядли кто станет.
Сделай хоть релиз бета версии...

 

Ответ: RSS Grabber

эхх ушло безвозвозвратно время грабберов!
Одних занулили, других в поисковиках забанили.. Третьи цены так не опустили - типа малуса и теперь их зенденое чудо мало кому нужно.
Неужели еще кто-то решается на разработки этого? Когда для wordpress есть совершенно бесплатный аналог, к тому же пионЭры еще и настроят его за $15 ???
А неистовые продавцы все вкурить эту тему не могут.. - Вкуривайте - http://vkurse.org и будьте вкурсе - цена вопроса - 30 ВМЗ - это если на голом месте, и 15 - если wordpress уже там стоит
Заметьте - именно настройка ! Все остальное - бесплатно а ведь настройка это и есть самое трудоемкое в граббинге!
А дальше.. - прогон за 10 вмз, и слив в сапу - и стригем по 20-30 вмз в месяц, пока не забанят
Зы когда за дело берутся пионеры - профи обычно с рынка уходят..а те что остаются...

 

Ответ: RSS Grabber

ну, не все ведь ставят wordpress. и на поисковики кому-то плевать. кому-то нужно регулярное пополнение сайта
платят же людям, чтоб они вручную копировали инфу с одного сайта на другой... почему не автоматизировать?
да еще и замиксовать контент.

ну а сам граббер? он сам пишется? да и вообще, если сравнить с услугами копипастеров, совсем даже не дорого это в долгосрочной перспективе (2-3 мес)

 

Ответ: RSS Grabber

Если кто-то хочет действительно сделать очень нужный компонент, то я могу дать пару-тройку очень ценных идей, и этот компонент будет очень востребован, но вот рожать очередной граббер.. Это просто уже смешно!

 

Ответ: RSS Grabber

от идей не откажусь, делитесь - буду признателен.
а граббер уже рожден, работает. Те, кто использует - довольны. Вопрос стоял, нужен ли он для Joomla

 

Хороший граббер но нет синонимайзера - это плохо. Хочу сказать как решил эту проблему я. В общем решил создать сайт на основе rss лент, кинулся рыть на тему rss грабберы + синонимайзер, ничего толкового из "на шару" не нашел. Ну ничего не оставалось как сделать все своими руками: пошел на liverss.ru отпарсил кучу лент дето 26000:=) самых разных тематик. Все еще не знал как сделать уникальный контент и тут набрел на один замечательный сайт http://seogenerator.ru/, всего два инструмента, генератор анкоров и синонимайзер но не обычный, а с ним можно работать через шлюз вот:

URL шлюза: http://seogenerator.ru/api/synonym/, возможны GET и POST запросы.
Кодировка запроса и ответа UTF-8, максимальная длинна входного текста 6000 символов.
Стоит ограничение на 20 запросов в минуту с одного IP адреса.
Входные параметры:

* text - исходный текст для синонимизации
* base - используемая база синонимов, может принимать значения: big1, sm2, sm1
* type - метод подстановки синонима(первый или случайный), значения: first, random
* count - сколько делать синонимизированных текстов(актуален только при type=random), значения: от 1 до 10
* format - формат ответа шлюза, значения: xml, json, text

Все ето я ктому что если есть хороший граббер но не дает уникальный контент, можно пропускать через етот API интерфейс и на выходе получать вполне читаемый текст. Вот демо- Новостной сайт http://www.105news.ru, чуть позже еще сделал телеканалы онлайн. В индексе у Яндекс,Раблер,Гугл болеее 11000 страниц.