Cплог, Говносайт, Дор и Yahoo Pipes

Дата: 21.10.2007
Рубрики: SEO (Black&White) |

yahoo pipes logo Периодически я встречал на блогах и форумах упоминание о Yahoo Pipes, но чтоб хоть одним глазком посмотреть, что же это такое, как-то у меня не сросталось, никто же не написал: “с помощью pipes я заработал $10к за неделю”. И наконец-то, я добрался до этого сервиса…

У меня есть только одно предположение, почему Yahoo отдала в публичное использование такой инструмнт – видимо, они имеют какой-то новый супер мощный алгоритм борьбы с дублированным контентом и прочим говнотекстом, и таким образом хотят заспамить Google и подорвать позиции своего конкурента на попроще поисковых технологий. :D Нет, понятно, что вся функциональность, зашитая в в Yahoo Pipes, была доступна и раньше любому начинающему web-программисту. Но так то надо было писать парсер или искать программера, тратить время и деньги на новые апгрейды и идеи, бороться с банами… Cейчас же любой технодаун совершенно бесплатно получил доступ к довольно мощной тулзе (один встроенный переводчик чего стоит). Лично я уже после 5 минут втыкания в примеры родил свою первую полезную “трубу”.

Если коротко, то Yahoo Pipes – это фид агрегатор с возможностью совершать различные манипуляции с фидами, и завернуто все это в визуальный интерфейс. Ну например, самое простое, вот так вы можете получить объединенные результаты поиска yahoo и google news. Понятно? :)

Из очевидных плюсов Yahoo Pipes можно выделить:

Что-то я не могу сходу придумать реально полезный для обычного юзера пример пайпа, вся эта псевдополезность получается глубоко высосана из пальца, зато в голову легко лезут куча полезностей для серого вебмастера :). Итак, вот вам примерный план, что можно сотворить с помощью обычных RSS, немного поколдовав над ними:

1. Cплог

2. Говносайт

3. Дор

Такой себе переход от полутонов серого к черному. :) Это просто примеры, никто не запрещает объединять эти варианты или придумывать что-то свое.

А вот пример готового несложного доргенератора, очень гибкого, за 10 минут можно настрочить под любую конкретную задачу.

yahoo pipes
Кто не понимает картинок (надеюсь таких будет много :) ), объясняю рецепт этого супчика на пальцах:

Это все, конечно, продукты не первой свежести, но главная фишка в том, что готовится блюдо очень быстро, ингредиентов большое разнообразие, а вкус будет зависеть только от вашей неограниченной фантазии.

Подумал тут, наверное, инструмент этот все-таки для домохозяек сложноват будет. Ну как человек с не программистским складом ума может понять, что такое Loop? Про регулярные выражения я вообще молчу. Кому-то понятно? Да, небольшой совет, для тех, кто собирается разбираться с пайпами – прежде чем что-то делать, изучите весь арсенал инструментов. А то я там такие кренделя воротил – ужас, а потом оказывалось, что всю эту балалайку можно заменить одним оператором… И вопрос знатокам, не смог разобраться: как из элемента item фида (например, из title) сделать строку (String) для последующей подстановки в операторы (например Regex). Если уметь это делать, то можно провернуть очень красивую штуку, а еще не хватает оператора IF…

А напоследок, припалю очень вкусную тему.
yahoo pipes

Кто не тормоз (этого Тормоза не касается :) ), легко догадается, что скрывается под свернутым Loop. Кстати, Тормоз, а ты чего забросил свой форум? Нашел там интересную инфу пока рылся в теме.

Что-то я совсем заигрался с этим трубопроводом… В арсенале у меня имеется еще парочка уникальных изобретений – практически готовые движки для различного рода сайтов, так что ждите продолжение…

Вот здесь можно перевести все ваши труды с Yahoo Pipes в денежный эквивалент, делать это лучше так.
—
Вы уже подписались на регулярное обновление рейтинга блогов? А на фид этого блога?

Еще по теме

Комментарии

Комментарии (72) на запись “Cплог, Говносайт, Дор и Yahoo Pipes”

  1. Skop 21.10.2007 23:21

    Тааак, кто-то захотел кол в голову =)
    Шутка)
    Лучше гвоздь вкрутить или болт заколотить)

    А вообще не верьте ему - там куча подводных камней, да и глюки у пайпов проскакивают периодически без всякой причины. Намучаетесь ещё =)
    Без обид)

  2. Нежные отношения между поисковиками и заголовками .:. Интернет, бизнес и маркетинг .:. блог Ильшата Саетова 22.10.2007 00:04

    […] в сео-рейтинге Арсера (открывшего для себя Яху-пайпс) стал четвертым […]

  3. Тормоз 22.10.2007 06:25

    Класс! Когда форум доделаю, обязательно поставлю ссылки и процитирую. Надеюсь, что ты не против.
    Я-то наивно думал, что в рунете кроме меня никто не делает сложные трубы )

    Я очень рад, что ты тоже влился. Рассказывай побольше всяких интересностей!
    А про if, да… насколько было бы лучше, если бы было )

    А ещё то ли я туплю, то ли это невозможно, столкнулся сейчас с проблемой: разделить в XML один пост на несколько.

    Про String не понял, Regex и так можно применять сразу в Title… [стоп!] Дошло. Ты хочешь применять title как условие для другого оператора? Хм, это интересно. Пока не знаю, возможно ли.

    P.S. А глючат иногда зверски, это правда. Особенно на сложных трубах вроде бомжеленты.

  4. square 22.10.2007 06:51

    А зачем вам там IF понадобился?

  5. Arser 22.10.2007 10:10

    Тормоз, честно говоря не заметил, чтоб трубы глючили (может мало еще юзал). Частенько глючат RSS сервисы, блоги, коннект инета…
    > Разделить в XML один пост на несколько.
    Не уверен, что понял, но может как-то так:
    - split’том делим одну rss на две
    - sub string’ом или regex’ом вырезаем разные часты поста и отдаем в результат
    - объеденяем через union две rss

    square, IF много где хочется. Ну например,
    ЕСЛИ нашли что-то по запросу, ТО… ИНАЧЕ новый запрос
    В принципе можно выкрутиться из любой ситуации, но сложно получается.

  6. Тормоз 22.10.2007 15:43

    Да, такой вариант я рассматривал. Но слишком толсто получится, слишком много модулей. Представь, если нужно один пост делить на 10 частей, например? :) И потом ещё каждую часть трансформировать. В пять экранов будет, блин…

  7. Arser 22.10.2007 16:28

    Может тогда просто 10 regex подрят… а потом item builder с результатов… А как именно разбить надо?

    Кстати, чтобы экраны не разрастались, можно оформлять часть трубы, в виде отдельного пайпа, очень удобно. Можно создать что-то типа своей библиотеки труб :)

  8. Arser 22.10.2007 16:33

    Я кажется понял что ты хочешь… типа мешать предложения в посте и все в таком духе?…

  9. Тормоз 22.10.2007 17:21

    Отвечу одной ссылкой. И тебе сразу всё станет понятно :)
    http://www.google.com/trends/hottrends

  10. Тормоз 22.10.2007 17:22

    Кстати, насчёт библиотеки труб. У меня бомжелента сейчас состоит из 5 труб. Из них четыре подсасываются в основной интегратор.
    Там уже вынужденное решение, всё глючило нах.
    Теперь по крайней мере при аварии проще отследить, на каком участке всё стопорится.

  11. Arser 22.10.2007 17:34

    Тормоз, это я сделал уже на 3й свой трубе… :)
    String Tokenizer для title и все дела…
    если хочется для description, наверное еще +Regex чтобы вырезать линки.

  12. Тормоз 22.10.2007 17:43

    В иделе там надо сравнивать сегодняшние данные с вчерашними, и отбирать несколько тем, которые ещё только на подъеме, выбирая самые лучшие сообщения из блогов и разбавляя ключевиком. Это было бы супер.
    Примерный алгоритм я знаю, как без сверки с картинками попадать с большей долей вероятности туда, куда надо.

  13. Arser 22.10.2007 17:54

    Выбрать только новые темы? а так ли это важно? если дергать кеи каждый день, то мы постоянно будем иметь все самое свежее. Проверил сейчас вручную первую двадцатку кеев за сегодня - почти все новое в сравнение со вчерашними.
    Про сверку картинок не понял…

  14. SEO-PPC-FAQ » Blog Archive » СтОит почитать #1 23.10.2007 09:59

    […] =>Cплог, Говносайт, Дор и Yahoo Pipes (Яху-пайпс - как из них сделать, к примеру, […]

  15. Тормоз 24.10.2007 22:51

    Только что появились очень интересные чекбоксы в модуле Regex! Я пока не понял для чего, и в документации ничего нет, и на их форуме тоже. Очень интересно!

    Блин, классный сервис. Развивается семимильными шагами.

    Напиши, если разберешься, что это за штуки. Модификаторы какие-то?

  16. Тормоз 25.10.2007 03:53

    Похоже, это модификаторы. Шикарно!

  17. Arser 25.10.2007 09:12

    Угумс. Дали бы они доступ к языку программирования этих труб, это было бы шикарно :)

  18. Anton 25.10.2007 09:42

    Ага былобы кайф самому поковырятсо

  19. badarse 29.10.2007 00:38

    sorry - тормоз я.
    а какой plugin из RSS в Wordpress post может?

  20. Тормоз 29.10.2007 01:05

    Мучаюсь сейчас, тоже понадобилось сделать из элемента строку ( Эх, как классно было бы, можно было бы подставить в regex. Ай-я-яй… Что же делать? Неужели нет способа? Всю голову себе сломал уже.

  21. Arser 29.10.2007 09:42

    2badarse: например WP-Autoblog, Feedwordpress, ну а самый вкусный я оставлю до следующего поста, когда хочу это подробно расписать :)

    2Тормоз: похоже что так сделать просто нельзя, кажется элементарно не совпадает их внутренний тип данных и преобразовать нечем. Выход только один - тянуть все rss, которые надо и обрабатывать уже своим кодом… :/

  22. За 3 дня в Google и без ссылок : Хожу на Работу в Интернет 29.10.2007 10:47

    […] я Yahoo Pipes, настроил свой робоблог и поехал на выходные с […]

  23. Тормоз 29.10.2007 19:05

    Я там эту свою проблему немножко иначе решил. Пришлось использовать две трубы, причем одна из них как сервис, с параметрами в ссылке на RSS, а вторая уже строит нужный URL. Тогда всё классно вышло.

    А еще не замечал, что часто Pipes просто не хочет применять некоторые вещи? Вот, например, мне сейчас обязательно нужны в одном RSS pubDate, которые источник не выдаёт… я их генерирую с помощью Loop и поискового запроса на ППБ. И вот в предпросмотре pubDate есть к каждому элементу, а на выходе нету, блин. ХЗ, чего ему надо.

  24. Arser 29.10.2007 19:27

    Даже не знаю, на словах понять сложно… Но я замечал, что в конечный фид не попадают элементы, которые вне спецификации rss. Может у тебя дата не в том формате?

  25. Тормоз 29.10.2007 20:14

    Да, лента валидируется, но дата точно какая надо. Вот это и странно.

  26. Тормоз 29.10.2007 21:46

    Победил! Оказывается, из Loop в элемент нужно копировать не только pubDate, но и y:published. Видимо, система как-то сопоставляет эти результаты.

  27. Arser 29.10.2007 22:03

    За наводку спасибо, хотя и не очень понятно, почему именно так…

  28. Самые читаемые посты на блогах 31.10.2007 00:40

    […] 1. Как заработать в интернете. Большинство инетересует не оптимизация, а онлайн заработок. 5 вещей, которые я никогда бы не сделал в Интернет-заработке Как заработать на туристическом сайте Рано или поздно мы придем к потолку. 17 советов от Маркуса Фринда: как сделать прибыльный онлайн бизнес или вебсайт Как русские работают на американских аукционах Как заработать в новой нише - мастер класс на примере телефонных карт от тов. soda Как привлечь рекламодателя? allseo: $10 384,4 Cплог, Говносайт, Дор и Yahoo Pipes […]

  29. Банановый рай 31.10.2007 12:40

    Тоже мне методика изготовления говносайтов.
    Вот: http://modernshit.ru реальный говносайт. А не всякое сео-рукоблудие :)

  30. Arser 31.10.2007 14:47

    Не надо впадать в крайности :D

  31. Куда податься дауншифтеру? | MaulNet.ru - для тех, кто умеет зарабатывать в Интернете 01.11.2007 16:25

    […] Интересное на сегодня: как попасть в DMOZ (честно говоря, проще стать редактором, что я и сделал), 10 “никогда” начинающим оптимизаторам, делаем зеркала блога, особенности поведения выдачи Google в зависимости от тематики запросов, как подобрать короткое доменное имя в зоне COM, ручного понижения PageRank нет, как зарабатывают киберсквотеры, как ИжБомжа казино надуло, свой бизнес в 9 лет, сплог, говносайт, дор и Yahoo Pipes. […]

  32. yahoo! pipes. Сплоги. Блоггеры. Мысли про трафик. | bajenov.com 06.11.2007 03:00

    […] Хожу на Работу в Интернет - Если коротко, то Yahoo Pipes – это фид агрегатор с возможностью совершать различные манипуляции с фидами, и завернуто все это в визуальный интерфейс. Ну например, самое простое, вот так вы можете получить объединенные результаты поиска yahoo и google news. Понятно? […]

  33. Еще один наш маленький юбилей. | Блог parMaster-а 16.11.2007 10:48

    […] Arser-а, ведущего блог "Хожу на работу в Интернет" - Cплог, Говносайт, Дор и Yahoo Pipes о Yahoo Pipes? весьма занимательная штучка, будет время - […]

  34. Джентльменский набор профессионального робоблогера (ДНПР) : Хожу на Работу в Интернет 18.11.2007 18:32

    […] Yahoo Pipes […]

  35. Kapitoshka 25.11.2007 23:35

    А угадывать тут нечего.

    http://blogs.icerocket.com/search?tab=blog&rss=1&q=[keyword]

    Получаем выдачу в rss формате по конкретному ключу. Потом этот рсс фетчаем как уже в пайп. почему обрубается только первая - не понятно, скорее всего самая релевантная выдача.

    А под всёрнутым луп или переводчик, или свой сервис для “уникальности” текста.

  36. Arser 25.11.2007 23:42

    Kapitoshka, не угадал. Под свернутым - стандартный элемент. Все очень просто, но читал на форумах, что многие так и не догадались, как это сделать. Скажу больше - я сам когда-то заплатил $100 за скрипт на php, делающий примерно то же самое, но хуже…

  37. user 26.11.2007 15:55

    автор. раскажи плз, как осуществляешь постинг

    конкретно интересует превращение Yahoo Pipe Output в пост на конечном блоге

    + как правильно парсить в yahoo pipes - поисковые и xml выдачи (например в трендах гугла)

    спасибо

  38. Тормоз 26.11.2007 15:56

    user, смотрел мультик про Вовку в тридевятом царстве? )

  39. Arser 26.11.2007 16:07

    > автор. раскажи плз, как осуществляешь постинг
    так
    Yahoo Pipe отдает результаты в виде RSS, если еще кто-то не заметил.

    > как правильно парсить в yahoo pipes - поисковые и xml выдачи
    А зачем парсить поисковую выдачу? Не понял.
    Распарить фид гугл трендс на слова можно с помощью String Tokenizer и String Regex.

    ПС. Зачем указывать левый email и сайт? Как-то лениво даже отвечать таким коментаторам.

  40. Kapitoshka 26.11.2007 18:56

    Хм….. говоришь знаешь как сделать уникальный текст под конкертный кейворд.
    из идей String.replace или Location Builder - кстати была такая идея, после твоего поста о рсс - но не нашёл источиника подходящего под новости, была вообще идея брать новости из рсс переходить на страницу и от туда грабить контент используя пайпы, была одна проблема которая не решается =).

  41. Arser 26.11.2007 19:08

    Ну вот я её решил ;) Не на 100%, но меня устраивает…

  42. Тормоз 26.11.2007 19:12

    Я тоже решил ) Подсказка: не забывайте про поисковую форму в сервисе. Уже сделано огромное количество труб на разные темы.

  43. Arser 26.11.2007 19:28

    Кстати да, как-то забыл поискать готовое что-то…
    Вот сейчас сходу нашел что-то полезное. Kapitoshka, для тебя:
    http://pipes.yahoo.com/pipes/pipe.info?_id=mpfknS1y3BGcfvNJouNLYQ

  44. Arser 26.11.2007 19:44

    Тормоз, хоть магарыч тебе выставляй :) нашел готовую трубу над которой только сегодня думал. Кстати, трубу с моей картинки тоже нашел…

  45. Тормоз 26.11.2007 20:07

    Тормоз очень любит автоматизацию, поэтому никогда не откажется от какого-нибудь скриптового технического магарыча ))

  46. Тормоз 26.11.2007 20:07

    … а можно и обмен опытом какой-нибудь произвести. Похоже, мы в пайпсах примерно на одном уровне.

  47. Arser 26.11.2007 20:19

    Это можно

  48. user 27.11.2007 17:48

    > Yahoo Pipe отдает результаты в виде RSS, если еще кто-то не заметил.

    заметил, просто интересно было узнать какими методами ты пользуешься для отправки содержания на блог

  49. Arser 27.11.2007 19:00

    WP-o-Matic как один из вариантов

  50. user 27.11.2007 20:22

    понятно, спасибо

    расажи плз в двух словах о посещаемости своих автоматических блогов

    какой порядок цифр, какой конверт (и на чём)
    и откуда больше всего приходит посетителей

  51. Arser 27.11.2007 20:31

    Из автоблогов это почти все:
    http://www.arserblog.com/snovo-splogi-70/
    Вообщем читай блог, потихоньку все рассказываю…

  52. user 27.11.2007 20:51

    > WP-o-Matic как один из вариантов

    а ещё какие варианты ? rss на мыло или другие плагины ?

  53. Arser 27.11.2007 20:55

    Свои скрипты. Остальное не пробовал.

  54. Тормоз 28.11.2007 10:24

    ОК, я начал. Твоя очередь )

  55. Kapitoshka 28.11.2007 10:49

    Таки понял, почти пришёл к решению, был свой сервис по очистке html->xml но не догодался использовать regExp а пробывал через захват XML но там не получалось =(

  56. Тормоз 29.12.2007 03:06

    Пипец. Появился модуль Fetch Page…

  57. Arser 29.12.2007 10:05

    Да, прикольно… :)
    Уже бы сразу добавили например модуль Splog :)

  58. Мой первый трубопровод. RSS feed. 06.01.2008 03:32

    […] Cплог, Говносайт, Дор и Yahoo Pipes [21.10.2007] […]

  59. Блог мужа Богослова » Blog Archive » Yahoo Pipes 08.01.2008 11:50

    […] Хоть откровенные гавносайты и не клепаю, но осматриваюсь чем народ в этом плане дышит. Тема про Yahoo Pipes спалена в принципе давно, но вменяемых статей до сих пор не видел. Сегодня наткнулся на статейку “Cплог, Говносайт, Дор и Yahoo Pipes”. […]

  60. kusmans 09.01.2008 09:24

    Yahoo Pipes, +1.

  61. Орлиное гнездо » Blog Archive » Чтение на ночь 14.01.2008 17:35

    […] применение яху пайпс для сплогов, говносайтов и доров. […]

  62. Илья 19.03.2008 17:02

    Господа, А может ли пайпес из rss-ки по ссылке выдирать новость целиком??

  63. Статьи рулят 31.03.2008 09:32

    Как по мне пайпс не однозначная вещь…для сплогов и доров всё что нужно…вот только зачем это нужно для ЛЮДЕЙ???

  64. СПЛОГ за п’ять хвилин: wordpress+RSS+Yahoo! Pipes | Монетизація блога 12.04.2008 18:29

    […] Cплог, Говносайт, Дор и Yahoo Pipes […]

  65. medman7777 11.05.2008 23:16

    Долго рылся в сети в поисках нормального русского мануала YAHOO PIPES или хелпа YAHOO PIPES. Но находил только не полную информацию. Пришлось сесть и сделать нормальный перевод с описаниями модулей, картинками и примерами. Если кому интересно читать нормальный перевод а не набор слов из переводчика заходите на сайт
    http://pipes-yahoo-com.onlinedrugs4u.com/

  66. из юрюпинска 15.05.2008 15:42

    http://pipes.kultik.ru/?Glavnaya

    бесплатно)

  67. Anfi 18.07.2008 08:17

    Ага конкуренция =) что ж тогда гугл придумает?

  68. alarm 11.08.2008 21:28

    ММ.. объясните мне кто-нибудь как правильно склеивать элементы в трубе? Сделал 2 канала, 1 выдирает содержимое и переименовывает в item.title, второй выдирает содержимое и переименовывает в item.description. Пытаюсь склеить это в один фид с помощью блока Union, но на выходе получается только фид с тайтлами. Не пинайте сильно, я не программер просто вовсе.

  69. Alex 14.10.2008 00:44

    а говносайты кстати получаются вполне приличные. шутки ради сделал несколько, слинковал чуток. все индексируется. засунул в сапу. денежка капает. все счастливы.

  70. Полный список русскоязычных ресурсов Yahoo Pipes : Гончая 06.01.2009 12:45

    […] Arseblog.com - и здесь есть крупицы […]

  71. Goarmy 14.01.2009 04:30

    Ну бля, с моей же трубы все слизали и хоть бы один хуй меня упомянул.
    При чем тут вообще тормоз, который тоже так же как и ты скомуниздил чужое и выдал за свое ?

  72. Тормоз 21.01.2009 14:48

    Goarmy, ну ты наглец. Это тот самый с умаксфорума, или просто конь в пальто какой-то? :) Ссылочку на “твою трубу” можно, с которой все коммуниздят, сволочи?

Оставить комментарий