Toute l'info et l'actu sur les annuaires et moteurs de recherche : Recherche d'information et référencement

Un métamoteur en Open Source

Une première version stable de la plateforme de veille collaborative Magellan Metasearch, sous licence open-source (GPL), vient d'être dévoilée. Ce progiciel, destiné à être installé sur un intranet, automatise la veille sur les moteurs de recherche, et possède les caractéristiques suivantes :

- Interrogation de dix moteurs de recherche (Web, Newsgroups, Weblogs), dont Google Web / Groups, AllTheWeb, Feedster, Gigablast...
- Récupération du nombre maximum de résultats pour chaque moteur, afin de tendre au maximum à l'exhaustivité.
- Langage d'interrogation avancé : méta-opérateurs et opérateurs de proximité.
- Dédoublonnage des résultats de recherche, extraction des méta-données pertinentes, tri multicritère.
- Modules d'analyse et de filtrage des résultats a posteriori.
- Planification des requêtes dans le temps afin de détecter les nouveaux résultats.
- Exportation des résultats sous Excel ou en HTML pour interfacer un crawler externe.
- Diffusion en temps réel d'alertes par e-mail et par RSS.

Outre un équilibrage de charge paramétrable, Magellan permet de maintenir l'anonymat du veilleur en gérant de manière autonome une liste de serveurs proxy par lesquels les requêtes doivent transiter. Contrairement aux métamoteurs classiques (type Copernic), les connecteurs faisant l'interface avec les moteurs de recherche sont modulaires, de sorte qu'un développeur peut
lui-même implémenter de nouveaux pilotes pour mettre en veille ses propres sources (intranets internes, bases de données professionnelles, annuaires, autres moteurs Web...). Ces pilotes sont conçus de manière à simuler le comportement d'un internaute, afin de pouvoir mettre en veille des moteurs de recherche faisant appel à des technologies dynamiques (formulaires, liens javascript, authentification forte...).

Magellan Metasearch est entièrement multi-utilisateur, et possède un modèle de gestion des permissions permettant de limiter l'accès à ses différents composants et sources selon le profil de chaque utilisateur.

Enfin, cet outil a été conçu afin que chacun puisse personnaliser les différents aspects de son fonctionnement et lui ajouter des fonctionnalités : interface, modules d'authentification et d'habilitation, filtres d'analyse, base de données sous-jacente, et pilotes de sources peuvent être réécrits à loisir sans perdre la compatibilité avec les autres composants.

http://sourceforge.net/projects/magellan2

Source : Motrech
 

Articles connexes sur ce site :

Carrot, projet de clustering Open Source
http://actu.abondance.com/2005-23/carrot.php

The Summer of Code : programmez cet été sur la plage...
http://actu.abondance.com/2005-22/summer-of-code.php

Google ouvre un site sur l'Open Source
http://actu.abondance.com/2005-12/google-code.php

Openindex et Mozdex vers les moteurs Open Source
http://actu.abondance.com/2004-22/openindex-mozdex.html

A9 lance l'initiative " Opensearch "
http://actu.abondance.com/2005-11/opensearch.php


Toutes les pages du réseau Abondance pour la requête open source...

 

Installez l'actu Abondance sur votre site L'actu de la semaine Lettre gratuite hebdomadaire Lettre professionnelle mensuelle Fil RSS Sponsorisez la lettre ActuMoteurs

Important : les informations ci-dessus peuvent être librement reprises sur une autre source d'information à l'expresse condition d'en mentionner la source (© Abondance ou Source : Abondance) accompagnée d'un lien vers la page d'accueil du site. Merci de votre compréhension.

Simplifiez-vous la vie : recevez directement chaque vendredi l'information de la semaine en vous inscrivant à la lettre GRATUITE "Actu Moteurs". Vous serez automatiquement inscrit dans la liste des destinataires ! (65 000 abonnés - plus d'infos) :