Et si on partage nos recherches avec Yacy ? - Dryusdan.fr https://www.dryusdan.fr/et-si-on-partage-nos-recherches-avec-yacy/ Yacy, le moteur de recherche en Peer 2 Peer pour se passer de Google. Et si on regardait un peu plus en détail cet outil ? #Yacy #SearchEngine #P2P #DHT #Autohébergement #selfHosting #autopromo https://link.dryusdan.fr/?4u3Ntw
@Dryusdan Y'a une instance de test dispo ?
@Eragon
Elle est pas encore fonctionnel car elle traite énormément de site et donc est très très lente
@Dryusdan Dac, car j'ai dl et lancé une instance locale et ça semble pas mal, mais gourmand en resources, mon pc passe de 5% de charge à 80... en 10 seconds...
@Eragon
Si tu fais de l'indexation oui c'est très gourmand (j'suis a 3 noeuds pour réduire cette consommation
@Dryusdan Awé... tu indexe quoi ?
drycat, dyusdan.fr et d'autres ?
@devnull @framasky
Oui, il a été indexé récement
Comme le site de @sebsauvage (que j'indexe depûis 2j)
Plus plein d'abonnement RSS qui alimente la base d'index (vive les flux RSS)
C'est long, lent, mais y a du potentiel ^
@Eragon
@Dryusdan @devnull @framasky @sebsauvage Il faudrais qu'on puisse proposer des sites à indexer, puis les instances(admins d'instances ou automagiquement) viennent regarder(via un flux rss) les proposition pour les indexer, quand un site est indexé et rendu public dans l'index global, il est marqué comme indexé sur le site de manière à ce que le logiciel puisse passer au site suivant et répartir la charge d'indexation.
@Eragon tu peux indexer sans avoir besoin de te connecter je crois ^
Mais je pense que je vais bloquer ça car ça explose les ressources...
Par contre la répartition d'indexation c'est possible si les instances supportent le remote crawling.
Par exemple j'ai 3 noeuds. Le noeud 1 a les infos et demande à d'autre peer de crawler pour lui.
Pareillement je pourrais faire un cluster de noeud pour qu'ils se répartissent la charge entre eux. Mais ça signifierai qu'il ne récupérerai pas d'index d'autre noeud, mais ils seront intérogeable
La meilleurs architecture serait un noeud de consultation uniquement, qui consulte un cluster de noeud
Mais en trme de ressource ça couterai plein de sous 😅
Aujourd'hui par contre n'importe qui peut aider à l'indexation en créant un noeud (t'installe le soft sur ton ordi) et en autorisant le remote crawling ^
@devnull @framasky @sebsauvage
@Dryusdan @devnull @framasky @sebsauvage Hum... routeur ne l'autorise pas, et j'ai plus son mot de passe, faudrait que je demande à mon frangin
@Eragon
Comment ça ? Tu as un message dans" état du système" ?
@Dryusdan Je sais plus ou c'était, faut que je re regarde, mais il n'est pas accessible de manière distante.
@Eragon
IPv6 ou 4 ?
Tu as fais un nat à partir de ta box ?
Ouvert le firewall ?
@Dryusdan ipv4 normalement le routeur bloque tout donc je sais bien ou ça coince, mais j'ai plus les identifiants
@Eragon
Le miens je clic pendant 5s sur wps pour y accéder 😅
@Dryusdan Hum...
En réalité le problème vient sans doute du second routeur...
@Eragon
D'accord 😅
@Dryusdan Le genre de réseaux assez chelou...
@Dryusdan AH... je crois que c'est bon... plus qu'a refaire toute la conf... puisque reset ne sauvegarde pas ça...
@Eragon
Ha ?
Faut pas hésiter à faire des remonté sur le github ;)
@Dryusdan Nan nan, mes problèmes là sont due à mon routeur, j'ai enfin trouvé le mot de passe... mais je doit refaire la conf(je vais peut-être passer mon pc dans la zone démilitarisé/sans pare-feu)
@Dryusdan Deux, un branché au modem, et un autre branché sur le premier, de manière à pouvoir avoir plus de ports et de gérer différemment les deux réseaux... mais le second refuse de se laisser faire quand je veux me connecter dessus. Le premier il est ok...