Плагин WPGrabber Плагин граббинга для WordPress

[Sawa111]

WPGrabber - плагин граббинга контента для CMS WordPress

С помощью плагина WPGrabber Вы сможете быстро наполнить свой блог на WordPress информацией с любых других сайтов!
Основные возможности плагина WPGrabber

• импорт контента в блог с любых HTML-сайтов
• импорта контента в блог с любых RSS-потоков
• импорт контента в блог со стен групп и сообществ соц. сети Вконтакте.ру
• возможность сохранения изображений из импортируемого текста у вас на сервере
• возможность перевода импортируемого контента на лету (поддержка более чем 20 языковых пар, функция двойного перевода для получения уникальных текстов)
• фильтрация сохраняемого у вас в блоге контента по словам, а также по наличию изображений в тексте.
• гибкие настройки обработки импортируемого текста (удаление из получаемого текста ненужных блоков информации, ссылок, картинок и т.д.)
• поддержка режима автоматической работы обновления информации с других сайтов
• интеграция с WordPress (поддержка Custom Post Types, поддержка Post Status, генерация алиасов для URL'ов записей в режиме ЧПУ)

Зачем мне нужен этот плагин?
Основная функция плагина конечно же наполнять ваш блог информацией с других сайтов. Однако учитывая весь функционал плагина можно предложить его использование для:

• наполнения СПЛОГОВ, ГС и любых других сайтов информацией с других сайтов, блогов, rss-потоков, стен вконтакте.
• ведения полнотекстовых новостных колонок у себя в блоге используя информацию с других сайтов
• создания локализованных версий сайтов при помощи встроенной системы перевода контента "на лету"
• создание информационных копий других сайтов

 

[hichkas62]

тот что в паблике (даже в этой ветке) тоже работает на последнем вп. но не очень стабильно

 

[intervister]

Господа, плиз хелп.
Пытаюсь настроить парсинг с ria.ru. Граббер видит страницы, но сообщает что они пустые. Что у меня не так?

Надпись "пустая страница" говорит о том, что вы неправильно указали начальную или конечную точку полного текста (либо обе сразу). Например, в вашем случае (сайт источник ria.ru/politics/) начальную точку разумнее указать <span class="b-statistic">, а конечную <div class="b-social-userbar">, то есть то место, где после текста начинаются значки соц. сетей. Да и с шаблоном заголовка вы наверное тоже ошиблись. У меня он получился такой <h1 class="b-article__title" itemprop="name"><span>(.*?)</span></h1>. Вообще, одинаковых шаблонов для настройки нет! У каждого сайта-донора свои начальные и конечные точки текста и тому подобное!

 

[domkrat]

Надпись "пустая страница" говорит о том, что вы неправильно указали начальную или конечную точку полного текста (либо обе сразу). Например, в вашем случае (сайт источник ria.ru/politics/) начальную точку разумнее указать <span class="b-statistic">, а конечную <div class="b-social-userbar">, то есть то место, где после текста начинаются значки соц. сетей. Да и с шаблоном заголовка вы наверное тоже ошиблись. У меня он получился такой <h1 class="b-article__title" itemprop="name"><span>(.*?)</span></h1>. Вообще, одинаковых шаблонов для настройки нет! У каждого сайта-донора свои начальные и конечные точки текста и тому подобное!

Спасибо за ответ, но увы - прописал указанные параметры, результат все тот-же.

Я грешу на http https, может кто сталкивался?

 

[agrx]

Спасибо за ответ, но увы - прописал указанные параметры, результат все тот-же.
Я грешу на http https, может кто сталкивался?

В настройках граббера у тебя https, а в загрузке страниц http. ria.ru автоматически перенаправляет на https, следовательно либо плагин обновить нужно (если не обновлен), либо в ручную его править. (p.s. у меня плагина нет)

 

[intervister]

Спасибо за ответ, но увы - прописал указанные параметры, результат все тот-же.

Я грешу на http https, может кто сталкивался?

А у меня всё работает при таких настройках. Значит нужно изменить другие настройки. Кстати, зайди на вкладку "Дополнительно". Что у тебя выбрано в строке "Для запросов использовать метод"? У меня выбрано "file__get_contents". Очень часто нужно использовать именно этот метод. Если и это не поможет, то посмотри настройки в других вкладках, может причина там. Кстати https тут ни при чём. У меня всё работает и при https! А чтобы спарсенный текст был ещё и с картинками и видео (если оно там есть), на вкладке "Обработка" в строке "Разрешенные HTML-теги" нужно разрешить теги <img><object><embed><iframe>.

 

[domkrat]

А у меня всё работает при таких настройках. Значит нужно изменить другие настройки. Кстати, зайди на вкладку "Дополнительно". Что у тебя выбрано в строке "Для запросов использовать метод"? У меня выбрано "file__get_contents". Очень часто нужно использовать именно этот метод. Если и это не поможет, то посмотри настройки в других вкладках, может причина там. Кстати https тут ни при чём. У меня всё работает и при https! А чтобы спарсенный текст был ещё и с картинками и видео (если оно там есть), на вкладке "Обработка" в строке "Разрешенные HTML-теги" нужно разрешить теги <img><object><embed><iframe>.

Спасибо, добрый человек! Стоял метод "По умолчанию", поменял - заработало.

 

[intervister]

Спасибо, добрый человек! Стоял метод "По умолчанию", поменял - заработало.

Пожалуйста! Если что, обращайся, помогу всем, естественно в свободное от всех дел время

 

[Sasha8808]

Пожалуйста! Если что, обращайся, помогу всем, естественно в свободное от всех дел время

А я вот с лентами разобрался...., почти, но вот в коротких новостях картинок нет, в полной публикации все ОК.
В чем причина не подскажете?

 

[EugeneW]

А я вот с лентами разобрался...., почти, но вот в коротких новостях картинок нет, в полной публикации все ОК.
В чем причина не подскажете?

В настройках ленты на вкладке Картинки включите параметры Сохранять картинки на сервере и Назначить первую картинку в качестве миниатюры записи.

 

[Sasha8808]

В настройках ленты на вкладке Картинки включите параметры Сохранять картинки на сервере и Назначить первую картинку в качестве миниатюры записи.

Все как раз так и стоит, но превьюшек нет, хотя в полной публикации все ОК. А в одной ленте, с такими же указанными параметрами вообще нигде картинок нет, после импорта визуально видно маленький "кривой" квадратик обозначающий изображение, код /wp-content/uploads/2017/04/c6a5e9a9521fba72747eb16509efda98.jpg" /> вроде бы правильный, но картинка не выводится. У донора код типа: src="//x.xxxx.xx/x/6/111111/650x.jpg" srcset="//x.xxxx.xx/x/6/111111/1300x.jpg 2x" id="bigimg" alt="бла-бла-блаt"/>