[actu] l'infrastructure technique de Google

Consultez la formation à Google Analytics de WebRankInfo / Ranking Metrics


WebRankInfo
Administrateur du site
Administrateur du site
 
Messages: 18964
Inscription: 19 Avr 2002

[actu] l'infrastructure technique de Google

Message le Lun Nov 01, 2004 22:17

Jeff Dean, ingénieur chez Google, a donné une conférence le 20 octobre dans l'Université de Washington. Au cours de cette conférence, il a abordé plusieurs thèmes axés sur l'infrastructure technique de Google, que j'ai tenté de vous résumer : Informations sur l'infrastructure technique de Google


TOMHTML
WRInaute accro
WRInaute accro
 
Messages: 3250
Inscription: 25 Aoû 2004

Message le Lun Nov 01, 2004 22:46

Merci pour l'article, j'ai pas trop le temps de regarder une vidéo d'une heure en anglais...
WRI, toujours plus fort ! :)

squawk
WRInaute accro
WRInaute accro
 
Messages: 5985
Inscription: 22 Mar 2004

Message le Lun Nov 01, 2004 23:14

Intéressant, si j'ai le temps je matterais la vidéo au boulot :D Sinon c'est marrant dans ma boite on a fait le même calcul que google il y a quelques mois (mais pour faire du calcul par éléments finis), entre un serveur et un cluster de PC la différence de tarif était d'un facteur 5 même si ca demande du boulot et de la place supplémentaire, le boss n'a pas hésité longtemps, hop un cluster de 64 machines (des p4 2Ghz et 1Go de ram), il marche super bien d'ailleurs. :)


Michel
WRInaute passionné
WRInaute passionné
 
Messages: 1724
Inscription: 22 Déc 2002

Message le Lun Nov 01, 2004 23:17

Cool ! merci wri


gil
WRInaute discret
WRInaute discret
 
Messages: 216
Inscription: 2 Nov 2002

Message le Mar Nov 02, 2004 10:14

Bravo WRI
Merci pour toutes ces infos.

rituel
WRInaute passionné
WRInaute passionné
 
Messages: 1175
Inscription: 15 Mar 2003

Message le Mar Nov 02, 2004 12:10

Vraiment très intéressant, leur architecture système est vraiment très impressionnante, et je n'ose même pas imaginer la complexité de leurs algorithmes ...


WebRankInfo
Administrateur du site
Administrateur du site
 
Messages: 18964
Inscription: 19 Avr 2002

Message le Mar Nov 02, 2004 15:21

pour compléter, un document de 2003 en anglais : Web search for a planet: the Google cluster architecture

Oncle Tom
WRInaute impliqué
WRInaute impliqué
 
Messages: 812
Inscription: 31 Mar 2003

Message le Mar Nov 02, 2004 15:52

Merci pour l'article :) je trouve ça super croustillant et intéressant comme infos. Mieux comprendre les mécaniques du géant est super enrichissant en tous cas ^^


Keranis
WRInaute discret
WRInaute discret
 
Messages: 61
Inscription: 15 Sep 2004

Message le Mar Nov 02, 2004 18:01

Merci WRI pour cette info, dommage que je ne comprend pas trop bien l'anglais (il parle vite le monsieur ...) mais ça a l'air passionnant ;)

Quelques urls que j'ai relevé sur les planches qu'il a présenté :
http://labs.google.com/papers/mapreduce.html
http://labs.google.com/papers/gfs.html
http://labs.google.com/why-google.html
Les liens PDF sur ces pages donnent accès à des documents plus complets, pour ceux que ça intéresse..

a+

spidetra
WRInaute passionné
WRInaute passionné
 
Messages: 1500
Inscription: 7 Juil 2003

Message le Ven Jan 27, 2006 10:21

Keranis a écrit:Quelques urls que j'ai relevé sur les planches qu'il a présenté :
http://labs.google.com/papers/mapreduce.html


map-reduce est en cours de dev dans la version 0.8-dev de Nutch.
Pour les fans de Java qui veulent comprendre cette architecture.


Si vous avez aimé cette discussion, partagez-la sur vos réseaux sociaux préférés :

Formation recommandée sur ce thème :

Formation Google Analytics : en 2 jours, apprenez comment exploiter l'essentiel des possibilités de l'outil de mesure d'audience de Google. Formation animée par les experts Google Analytics de Ranking Metrics.

Tous les détails sur le site Ranking Metrics : programme, prix, dates et lieux, inscription en ligne.

Lectures recommandées sur ce thème :



Qui est en ligne

Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 1 invité