Comment ils font ce truc.... !! Ca m'interesse!


Anto1982
WRInaute passionné
WRInaute passionné
 
Messages: 1334
Inscription: 7 Mai 2009

Comment ils font ce truc.... !! Ca m'interesse!

Message le Mar Juin 09, 2009 10:39

Bonjour a tous!

J'ai une petite question technique:
Apres avoir visité ce site: http://www.aboutus.org/ (et y avoir ajouté mon site internet)
Je me suis rendu compte que "aboutus.org" avait visité mon site.

Il a récupéré les métablaises description et title (OK, un grand nombre de sites arrivent également a faire ça!) mais en plus, il a assigné a mon site des "catégories" (catégories qu'ils doit avoir en mémoire dans sa base de données).

Quel type de script/langage permet d'explorer un site tiers et de récupérer des données permettant de faire cela...??

Un grand merci a tous ceux qui pourraient m'aiguiller, ce systeme m'interesse beaucoup!!

Anto


e-kiwi
Modérateur
Modérateur
 
Messages: 15617
Inscription: 23 Déc 2003

Re: Comment ils font ce truc.... !! Ca m'interesse!

Message le Mar Juin 09, 2009 10:41



Anto1982
WRInaute passionné
WRInaute passionné
 
Messages: 1334
Inscription: 7 Mai 2009

Re: Comment ils font ce truc.... !! Ca m'interesse!

Message le Mar Juin 09, 2009 10:47



Merci E-Kiwi!

Et ensuite, en fonction du contenu des méta tags, ils le font "matcher" avec des catégories qu'ils ont dans leur base. OK.
Maintenant, peut-on pousser un peu plus loin et carrément "crawler" le site web sur une profondeur de 2-3 links... Pour avoir un résultat plus fin...?

dmathieu
Modérateur
Modérateur
 
Messages: 7244
Inscription: 9 Jan 2004

Re: Comment ils font ce truc.... !! Ca m'interesse!

Message le Mar Juin 09, 2009 12:54

Maintenant, peut-on pousser un peu plus loin et carrément "crawler" le site web sur une profondeur de 2-3 links... Pour avoir un résultat plus fin...?

La seule limite en développement, c'est ton imagination.
Donc oui tu peut crawler autant de pages du site que tu veut ... Google le fait bien.
Après non, il n'y a pas de méthode stricte pour le faire. C'est trop précis. A toi de développer la chose.


Si vous avez aimé cette discussion, partagez-la sur vos réseaux sociaux préférés :

Lectures recommandées sur ce thème :



Qui est en ligne

Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 0 invités