Et si on partage nos recherches avec Yacy ? - Dryusdan.fr https://www.dryusdan.fr/et-si-on-partage-nos-recherches-avec-yacy/ Yacy, le moteur de recherche en Peer 2 Peer pour se passer de Google. Et si on regardait un peu plus en détail cet outil ? #Yacy #SearchEngine #P2P #DHT #Autohébergement #selfHosting #autopromo https://link.dryusdan.fr/?4u3Ntw

@Dryusdan Y'a une instance de test dispo ?

@Eragon
Elle est pas encore fonctionnel car elle traite énormément de site et donc est très très lente

@Dryusdan Dac, car j'ai dl et lancé une instance locale et ça semble pas mal, mais gourmand en resources, mon pc passe de 5% de charge à 80... en 10 seconds...

@Eragon
Si tu fais de l'indexation oui c'est très gourmand (j'suis a 3 noeuds pour réduire cette consommation

@Dryusdan Awé... tu indexe quoi ?
drycat, dyusdan.fr et d'autres ?

@Eragon Actuellement tout ça :

@Dryusdan Tiens, t'as le blog de @framasky dans le lot…

@Eragon

@devnull @framasky@framapiaf.org
Oui, il a été indexé récement
Comme le site de @sebsauvage@framapiaf.org (que j'indexe depûis 2j)
Plus plein d'abonnement RSS qui alimente la base d'index (vive les flux RSS)
C'est long, lent, mais y a du potentiel ^{^}
@Eragon

@Dryusdan @devnull @framasky@framapiaf.org @sebsauvage@framapiaf.org Il faudrais qu'on puisse proposer des sites à indexer, puis les instances(admins d'instances ou automagiquement) viennent regarder(via un flux rss) les proposition pour les indexer, quand un site est indexé et rendu public dans l'index global, il est marqué comme indexé sur le site de manière à ce que le logiciel puisse passer au site suivant et répartir la charge d'indexation.

@Eragon tu peux indexer sans avoir besoin de te connecter je crois ^{^}
Mais je pense que je vais bloquer ça car ça explose les ressources...

Par contre la répartition d'indexation c'est possible si les instances supportent le remote crawling.
Par exemple j'ai 3 noeuds. Le noeud 1 a les infos et demande à d'autre peer de crawler pour lui.
Pareillement je pourrais faire un cluster de noeud pour qu'ils se répartissent la charge entre eux. Mais ça signifierai qu'il ne récupérerai pas d'index d'autre noeud, mais ils seront intérogeable
La meilleurs architecture serait un noeud de consultation uniquement, qui consulte un cluster de noeud
Mais en trme de ressource ça couterai plein de sous 😅

Aujourd'hui par contre n'importe qui peut aider à l'indexation en créant un noeud (t'installe le soft sur ton ordi) et en autorisant le remote crawling ^{^}
@devnull @framasky@framapiaf.org @sebsauvage@framapiaf.org

@Dryusdan @devnull @framasky@framapiaf.org @sebsauvage@framapiaf.org Hum... routeur ne l'autorise pas, et j'ai plus son mot de passe, faudrait que je demande à mon frangin

@Eragon
Comment ça ? Tu as un message dans" état du système" ?

@Dryusdan Je sais plus ou c'était, faut que je re regarde, mais il n'est pas accessible de manière distante.

@Eragon
IPv6 ou 4 ?
Tu as fais un nat à partir de ta box ?
Ouvert le firewall ?

@Dryusdan ipv4 normalement le routeur bloque tout donc je sais bien ou ça coince, mais j'ai plus les identifiants

@Eragon
Le miens je clic pendant 5s sur wps pour y accéder 😅