Grubng cae, ahora estoy con Yacy

2010 - 12 - 16

Hace unas semanas comenté por aquí he había empezado a colaborar con Grubng para mapear la web. Lamentablemente los servidores principales han caído, y según me ha dicho uno de los líderes del proyecto posiblemente van a tener que migrar la infraestructura a otro servidore dedicado, así que va para largo.

Estando parado grub.org me he puesto a buscar algún proyecto silimar y me he encontrando con yacy.net, que finalmente me he dado cuenta de que está mucho más maduro. La filosofía es distinta, pues si te unes al proyecto, no solo recorres la web creado indices, sino que además serás un nodo más. Vamos, filosofía p2p. Por ahora lo he tenido un tiempo ejecutándose y funciona, incluso tiene mejor amplitud de búsqueda que Grubng. La pena es que el cliente no es del todo estable y alguna vez se cae.

Ya iré comentado como me va.
...more

Mapeando la red con Grubng

2010 - 12 - 16

No hace mucho descubrí grub.org , donde se desarrolla un buscador web colaborativo y completamente transparente al usuario (además software libre). Se trata de que mientras utilizas el PC un pequeño programa va navegando y creando indices de las paginas web de Internet, del mismo modo que lo hacen los bots de Google.
El caso es que me ha parecido interesante la idea de una buscador colaborativo, por lo menos como opción a los clásicos. Así que he puesto el programa a funcionar, al final de la tarde 20.000 direcciones inspeccionadas. Inicialmente parece mucho, pero fríamente debe ser una parte ínfima de Internet. En fin … seguiré utilizándolo mientras no moleste.
...more