jeudi 21 février 2008 


Accueil > Actualité des moteurs de recherche et du référencement >

Yahoo! intègre l'environnement Open Source Hadoop à son moteur de recherche

Envoyer a un ami Version imprimable    

Yahoo! vient d'annoncer que l'infrastructure de son moteur de recherche s'appuyait de plus en plus sur des technologies Open Source et notamment sur le système Hadoop d'Apache dans le cadre de ce que Yahoo! annonce comme "la plus grande implémentation commerciale dans le monde" de ce produit. Hadoop est donc maintenant utilisé par Yahoo! pour mettre en place le Webmap, l'application qui produit l'index de 20 milliards de pages qu'utilise la technologie de recherche de Yahoo! (Yahoo! Search Technology).

Voici quelques chiffres sur ce Webmap :
- Nombre de liens entre les pages de l'index : 1 trillion.
- Poids de l'index : 300 Teraoctets, une fois compressé !
- Taille des disques utilisés en production : 5 Petaoctets...

Dans la vidéo ci-dessous, Jeremy Zawodny, du Yahoo! Developer Network, interviewe Arnab Bhattacharjee (manager - Yahoo! Webmap Team) and Sameer Paranjpye (manager - Hadoop development) qui expliquent comment le projet a été mis en place :



logo hadoop
Logo du projet Apache Hadoop - Source : Apache


http://hadoop.apache.org/

Source :
Hadoop Now at the Heart of Every Yahoo! Search (Yahoo!)
Hadoop running in production on the Yahoo! Search Webmap (Yahoo!)

Articles connexes sur ce site :

- OpenSocial : des APIs sociales en Open Source pour Google (31 octobre 2007)
- Google héberge des projets Open Source (31 juillet 2006)
- Un métamoteur en Open Source (8 juin 2005)
- Un outil de reporting de référencement "Open Source" (6 janvier 2004)

Toutes les pages du réseau Abondance pour la requête open source...

Wikio

0 Commentaires :

Rappelons ici que les liens insérés dans vos commentaires sont en 'rel=nofollow' et ne sont donc ni suivis ni interprétés par les moteurs de recherche...

Poster un nouveau commentaire


<< Accueil
 


Retrouvez ici toute l'actualité des moteurs de recherche majeurs et du référencement en France et dans le Monde, jour après jour : nouveautés, rachats, nouveaux moteurs, nouvelles fonctions, nouvelles annonces, nouveaux outils, etc.
 
feed xml
 
Wikio
 
Pour tout savoir sur le livre "Réussir son référencement web, 2ème édition" (Eyrolles, novembre 2009), consultez le site Livre Référencement !

 
Lettre d'actualité
La lettre "Actu Moteurs" est hebdomadaire et gratuite. Abonnez-vous :

Rejoignez nos 70 000 abonnés (plus d'infos) depuis 1998 et recevez toute l'info sur les moteurs chaque semaine !

 
Les blogs d'Abondance
Abondance-Actu :
Toute l'actualité quotidienne des moteurs de recherche et du référencement.
Abondance-Info :
Quelques réflexions sur les moteurs de recherche et le référencement.
Abondance-Pro :
Le sommaire de la lettre professionnelle "Recherche et Référencement".
Abondance-Abonnés :
Le blog des abonnés payants.
 



 
 Recherche sur le site Abondance :

Tout Abondance
Toute l'actu depuis 1998


 

 

Messages précédents

 
Google condamné à 150 000 euros pour contrefaçon
Del.icio.us bloque les moteurs
Google : 1 page web sur 1000 est infectée par des ...
Yahoo! va lancer son Digg-Like
Espace : Google attaqué pour Google Earth Sky, Mic...
Google teste les liens sponsorisés vidéo dans ses ...
Microsoft Live se réorganise, Steve Berkowitz part...
Yahoo! continue sa réflexion et discute avec News ...
Google fête la Saint Valentin
Bradley Horowitz, de Yahoo! à Google

 

Archives

 
juillet 2007
août 2007
septembre 2007
octobre 2007
novembre 2007
décembre 2007
janvier 2008
février 2008
mars 2008
avril 2008
mai 2008
juin 2008
juillet 2008
août 2008
septembre 2008
octobre 2008
novembre 2008
décembre 2008
janvier 2009
février 2009
mars 2009
avril 2009
mai 2009
juin 2009
juillet 2009
août 2009
septembre 2009
octobre 2009
novembre 2009
décembre 2009
janvier 2010
février 2010

 

Lettres d'actualité

 
Actu Moteurs : revue de presse hebdomadaire (gratuite)
Recherche & Référencement : lettre professionnelle mensuelle (payante)

 
Chercher sur le Web avec Mozbot :

Chercher sur :
Web international
Web francophone
Un site du Réseau Abondance (english version : Search Engine Tools) :
Information : Abondance - Goossip - Forums Abondance - Boutique Abondance - Livre Référencement
Outils : Outiref - Visiref - Keyword Search Engine - Spider Simulator - Soumission-Manuelle - Flash Moteurs - Moklic
Divers / Jeux : Googlefight - Googland - Klevener
Moteurs de recherche : Mozbot.fr - Mozbot.com - Mozbot.co.uk - Motref - Grifil.net - Biomalin - Foot Engine - SearchWings
Applicatifs du site Abondance réalisés par les sociétés Brioude Internet Référencement et Iseom