Distributed Google

дожу анабиоза ему, следующего позавить ...

> Ибо темпы роста гуглевских вычислительных мощностей меня очень пугают.

+1024!

> дожу анабиоза ему, следующего позавить ...

Чего вкусного жуешь?

А то я на минутку представил себя на месте хозяина гугля, и вдруг с ужасом ощутил, что интернет растёт всё быстрее и быстрее, и чтобы google.com продолжал эффективно искать, придётся разворачивать всё новые и новые дата-центры, всё больше и больше их, до бесконечности. Грубо говоря, развивать свою вычислительную сеть размером с интернет. И следующей мыслью стало: эта гонка может кончится только тем что либо гугль подминает под себя интернет и процветает, либо таки в конце концов проигрывает, не в силах поддерживать такие темпы роста.

> Чего вкусного жуешь?

Скорее всего не жует.. Он же bsdешник.

О, вот нашёл какое-то проприетарное говнище. http://www.faroo.com/ Но всё-таки, надо что-то свободное.

> Он же bsdешник.

Та ты шо?! Диагноз такой?

> Та ты шо?! Диагноз такой?

Рассказать сказку на ночь о ориентации девела sendmail?

О, уже что-то: http://yacy.net/. Опенсорсное, даже что-то ищет.

Имхо, будущее как раз за децентрализованными p2p сетями и распределёнными вычислениями. Так что, рано или поздно, оно полюбому так и будет :)

> Чего вкусного жуешь?

таблетку от анабиоза )

/me как-то на уроке химии ляпнул, что поскольку космос состоит из водорода из него можно добывать воду.

Вы сначала первую задачу решите, на предмет качественного индексирования. Чтобы не хуже гугля/яндекса работало, потом можно остальным заняться.

> Надо быстрее это провернуть, пока гугль ещё не скупил все интернеты, и тогда ему наконец-то хана. Ибо темпы роста гуглевских вычислительных мощностей меня очень пугают

Скоро электромагнитное поле от гуглевских вычеслительных мощностей вызовут мегаТорнадо, и все подохнут. Ура свидетелям 2014 года! Ура Торнаде разрушителю!

> Вы сначала первую задачу решите, на предмет качественного индексирования. Чтобы не хуже гугля/яндекса работало, потом можно остальным заняться.

Дуралей. Проиндексировать - задача тривиальная, все сложности связаны только с огромными объёмами информации.

интересная идея.
хреново только то, что доверять источникам страшновато :/

В этом главная проблема, но в распределённых вычислениях обычно от этого защищуются перепроверкой результатов на нескольких нодах, и тут можно что-то подобное придумать.

Ну или так: каждый сайт пускай сам отвечает за свой индекс. Заодно его и для локального поиска можно использовать. А кто будет мухлевать, того банить, или какую-нибудь там карму понижать.

А как в осле поиск сделан? Там же тоже по клиентам шарится п2п вроде?

Во чего я нашёл, забавно. http://www.readwriteweb.com/archives/how_to_build_an_open_source_google.php

Чую, через год-другой распределённые поисковики полезут как грибы.

> Проиндексировать - задача тривиальная, все сложности связаны только с огромными объёмами информации.

За слова отвечаем? Ноги в руки и вперёд. Желаю видеть тривиальный пример тривиального кода, соизмеримого по возможностям поиска с yandex.