alizar Nov 29 2011 at 09:07

Распределённый поисковик YaCy версия 1.0

2 min

18K

Search engines*

+42

Comments 36

Injected Nov 29 2011 at 09:17

Кстати вчера хотел его поставить, но потом передумал когда он сказал что требуется 30гб для кеша, а у мени они отсутствуют.

Yeah Nov 29 2011 at 09:53

В FAQ написано:

You don't need a fast machine to run YaCy. You also don't need a lot of space. You can configure the amount of Megabytes that you want to spend for the cache and the index. Any time-critical task is delayed automatically and takes place when you are idle surfing (this works only if you use YaCy as http proxy).

Alexvir Nov 29 2011 at 09:32

Прочел как «ЯйЦа»

Melkij Nov 29 2011 at 09:33

Поставил ноду в виртуалку.

Melkij Nov 29 2011 at 09:50

Вроде работает. Памяти только до жути хочет =(

Yeah Nov 29 2011 at 09:48

Кириллица в поиске не работает.
Релевантность на 0 (по запросу «windows 7» предложил скачать Putty и сходить на lenta.ru)

Кстати, интересно, что будет если нода отключится? В торрентах все раздают одно и то же и отключение пира лишь уменьшает число сидеров на 1. А тут получается, что может выпадать часть поискового индекса.

ENargit Nov 29 2011 at 12:15

Уверен, что разработчики позаботились о репликации.

Melkij Nov 29 2011 at 13:27

Примечательно, что кириллица не работает только в демке.

По релевантности — интереснее. Похоже, нода выдаёт то, что именно ей кажется более близким. Демка правда даёт что-то, не имеющее отношения к windows 7, у меня выдаются новости overclockers.ru (сильно подозреваю, что потому, что указал проиндексировать этот сайт)

ElleSolomina Feb 27 2014 at 11:20

Пишу Вам из 2014 г, т.е. три года спустя… лучше не стало. Кириллица и юникод вообще теперь работают отлично, это несомненный плюс! Но, к сожалению, поисковик до сих пор годится только для локального поиска по сайтам, но никак не для глобального поиска :)

UFO landed and left these words here

Funcraft Nov 29 2011 at 13:00

Конечно, странно, что за 5 лет всё так грустно, но, с другой стороны, это же открытая разработка — сделали ядрышко в свободное время, теперь ждут помощи сообщества.

Funcraft Nov 29 2011 at 13:05

Кстати, название (YaCy) из-за первых двух букв наталкивает на мысль о Яндексе.

novoselov Nov 30 2011 at 06:22

Yahoo же

yakovis Nov 29 2011 at 13:07

> Никакого хранения истории запросов, никаких следящих кукисов.
Ну то есть они никогда, увы, не смогут догнать коммерческие поисковики. Сильно сомневаюсь, чтобы это было возможно без анализа поведения пользователей и без поведенческого таргетинга.

vxsw Nov 29 2011 at 14:31

А зачем их собственно «догонять» в количестве рекламного мусора и нарушении конфиденциальности?

yakovis Nov 29 2011 at 14:34

в этой области не обязательно. но анализ поведения используется для улучшения качества поиска.

vxsw Nov 29 2011 at 14:38

Что-то сомневаюсь я, что пользователю всегда требуется именно такое «качество», в котором первые позиции занимают проSEOшенные локальные коммерческие ресурсы.

yakovis Nov 29 2011 at 14:41

1. коммерческим поисковикам не выгодно, чтобы в первых рядах были «просеошенные ресурсы», им выгодно, чтобы деньги носили не к оптимизаторам, а за контекстную рекламу
2. борются с накрутками они, в частности, с помощью анализа поведения живых пользователей; получается у них с переменным успехом, а без этого инструмента, вероятно, еще труднее.

vxsw Nov 29 2011 at 15:02

А будет ли столько накруток в некоммерческом децентрализированном поисковике, сколько вирусов под Linux, например?

yakovis Nov 29 2011 at 15:04

разумеется, если им никто не будет пользоваться, под него не будут накручивать. правда, вот беда, он будет подвержен значительной части накруток для «больших» поисковиков, но не будет обладать частью их механизмов для борьбы.

vxsw Nov 29 2011 at 14:29

В ответ на запрос «WIkipedia» почему-то выдало первой строкой страницу из википедии об индийском кастовом ёге Шри Ауробиндо:). Что символизирует.

vxsw Nov 29 2011 at 14:35

Однако подозреваю, что самой вкусной опцией использование клиента сабжа является «Search portal for your own web pages», что позволяет формировать поисковые сообщества, по сути независимые от большого гугла, а заодно и от ручонок всяческих копирастов и цензоров.

xenon Nov 30 2011 at 01:53

а у гугла вроде тоже есть собственный custom search, чтобы делать, скажем, «поисковик по серверам хеви-метал направленности» (и туда не попадут сайты по сталепрокату или оперные арии, а только нужные арии будут). Или я ошибаюсь с этой фичей?

arkady Nov 29 2011 at 22:38

У меня вылетела на последнем секундах установки… Win7 x64

pavlov99 Nov 30 2011 at 00:28

К сожалению на P2P хорошо ложится только обход и индексирование сайтов,
а для собственно поиска и ранжирования надо уметь отработать запрос на всех машинах где хранятся кусочки индекса. Либо у них будут потери в скорости ответа, либо будет поиск по ущербно малой части интернета.

bootch Nov 30 2011 at 06:25

Кэширование может спасти.

skobkin Nov 21 2024 at 14:21

Спасти не может. Только чуть-чуть ослабить проблему.

Но если каждый новый запрос в среднем рандомный, то эффект будет мал.

alexber220 Nov 30 2011 at 06:21

ради релевантного ответа можно и подождать несколько секунд.

nikolaykhl Nov 30 2011 at 07:14

Если релевантность страдает сейчас, что будет, если там вдруг появится трафик и на поисковик обратят взор до сих пор невымершие спаммеры и дорвейщики?

alexber220 Nov 30 2011 at 07:26

активнее использовать поведенческие факторы

AStahl Nov 30 2011 at 08:36

>On linux you need OpenJDK6.
Г-р-ррр… Переписать им код на нормальном языке что ли?

Nashev Mar 17 2017 at 14:15

А воз и ныне там…
Вот интересно, почему никто и нигде не описывает и не обсуждает трафик, который эта штука пожрёт у того, кто его себе поставит? Нигде никаких хоть примерных цифр!

А ведь неплохо б такие штуки ставить на автономные, маленькие, и постоянно подключенные к интернету компы, такие как в роутерах нынче.

skobkin Nov 21 2024 at 13:52

Впечатление, что LLM писала. Как будто были сделаны далеко идущие выводы из-за слова "релиз" и "1.0".

Активисты движения за свободное ПО запустили новый проект

Проекту много лет. Ещё в 2019 году репортил им идею разделить DHT и вебню по портам.

Версия YaCy 1.0 вышла после пяти лет разработки, и теперь присоединиться к сети наконец-то может любой желающий

А раньше нельзя было? Не помню чтобы мне что-то мешало пять лет назад запустить у себя ноду.

А ещё чисто логический вопрос к этому:

Если у вас свой сайт, то проиндексирйте хотя бы его — и разместите индекс в собственном узле Freeworld. Для этого нужно после индексации отключить в программе функции DHT Distribution и DHT Receive

Правильно ли я понимаю, что нужно:

Проиндексировать сайт
Отключить распространение индекса

Можно какое-то пояснение о смысле этой последовательности действий?

В каком-то роде YaCy — это аналог свободной социальной сети Diaspora, которая позиционируется как альтернатива закрытым централизованным Facebook/Google+/etc.

Лучше приводить в пример Федивёрс (Mastodon, Pixelfed, PeerTube, etc) работающий на протоколе ActivityPub сделанном в W3C, который в итоге в экспериментальном режиме даже Meta решила попробовать в своих Threads.

P.S. Но за освещение децентрализованных проектов спасибо.

skobkin Nov 21 2024 at 14:26

Отбой. Пришёл по ссылке на пост и не увидел дату :)

alizar Nov 22 2024 at 06:35

Тогда ещё LLM не было ))

skobkin Nov 22 2024 at 13:21

Да, я когда увидел даты окружающих комментариев уже понял.

Я просто сюда по ссылке из Mastodon пришёл, а там это выглядело как будто это новость. И я прямо удивился: какая же это новость, если я к этой штуке ещё пять лет назад фичреквест писал?

Так что извиняюсь за неуместную критику.