Google: indexation instantanée - impressionnant

[HawkEye]

Hello,

Je termine à l'instant un mécanisme de publication différée pour l'annuaire indeXweb.info.
Ce mécanisme n'affecte pas la présence des liens dans les flux RSS et sitemaps XML.

Je termine donc, et je teste, en validant deux sites à la volée. Résultat: un publié immédiatement, et l'autre publié dans 5 minutes.
Mon test valide le fonctionnement, je passe à ma "tâche" suivante.

Moins d'une minute plus tard, je fais une commande site:annuaire.indexweb.info avec &tbs=rltm:1 qui permet d'afficher les résultats les plus récents.

Que ne vois-je comme premiers résultats que les fiches des deux sites que je viens de valider.
La première était linkée depuis la homepage depuis 1 minute. J'étais habitué à du 6-7 minutes... donc j'hallucine déjà un peu...
Mais l'autre - elle - n'était encore linkée de nulle part.
Je ne l'avais pas non plus visitée - ce qui écarte un crawl par Mediapartners ou la Toolbar.

> Via le Sitemap XML, Google a indexé en quelques secondes à peine une page qui n'est même pas encore publiée.
Je trouve ça complètement dingue.
Est-ce que vous avez des expériences similaires ? Au niveau de sites de news éventuellement ?

[mx]

question qui n'a aucun rapport, le contenu de ton site est-il unique ?
et autre question, ta recherche par tag, cela fait longtemps qu'elle est mise en place ?

[YoyoS]

Encore rien avoir mais sur un blog , j'ai créé un new billet et quelques secondes après, je tape le titre sur google et je le trouve ^^
Ca doit être à cause du système de wordpress qui fait un ping à google pour faire venir le bot j'imagine.

[Firewave]

J'ai déjà eu ça. Je me suis toujours dit que google arrivait à détecter quand un bot était sur le site la modification de structure et allait vérifier si c'était bien le cas.

[e-kiwi]

moi j'ai ce cas tout le temps, Google m'indexe des articles quelques secondes avant leur mise en ligne, si le sitemap est publié avant l'article. sinon, c'est de l'ordre de quelques secondes, mais ca me le fait depuis plus d'un an, ce n'est pas nouveau

[passion]

ça serait bien qu'il fasse aussi la maj sur ce qu'il a déjà dans sa base au lieu d'en rajouter toujours un peu plus !
ça fait des semaines (pour ne pas dire des mois) que je trimbale des urls obsolètes ou je ne sais pas comment il a pu m'en trouver certaines !

[e-kiwi]

moi ca fait des années, alors que je lui ai balancé du 404, du 410, ... et il s'en fiche royalement ...

[1-sponsor]

Hawk, c'est mon cas pour tous les articles du blog de waaaouh depuis toujours c'est réellement "instantané" (le temps de valider et de switcher sur google c'est indexé) et pour l'annuaire, ça varie de 5 minutes à 1h30 environs... De même, pour indexweb, j'ai déjà remarqué il y a un bon moment des fiches indexées après seulement quelques petites minutes après avoir été liées en home... (quand je te soumets un site, je surveille forcément quand tu me valides :D)

Mon avis : on obtient ça lorsqu'on a une home qui links très régulièrement des pages de contenus riches et fréquemment (+ieurs fois/jour) mise à jour + une structure très profonde (un annuaire, un blog...). Oui, en fait, pour l'annuaire, au lancement je tentais de valider les sites en instantanés, donc 20 ajouts sur la journée environ et l'indexation était +- dans les 20 minutes en moyenne. Maintenant, je reste parfois jusqu'à 24 heures sans valider et ça a ralenti le temps d'indexation. Je dois parfois attendre + d'une heure...

...D'ailleurs, c'est bon pour nos clients, car j'ai déjà eu quelques retours de gens qui étaient contents d'avoir leur nouveau domaine indexé dans google quelques courtes heures après leur valid. sur l'annuaire...

[jcaron]

Tu n'aurais pas un ping lié à ton flux RSS? Google ne les écoute pas tous, mais quand il les écoute, c'est clair que ça fuse.

D'ailleurs si quelqu'un connaît le(s) critère(s) pour qu'il est écoute...

Jacques.

[1-sponsor]

+1 pou le Flux RSS, je pense que ça joue ;)

[fredfan]

Le webmestre avait reçu le mail de confirmation ? C'est peut-être simplement lui qui a fait un ping pour faire indexer sa page.

[HawkEye]

Le contenu est unique.
Le mail de confirmation n'est envoyé que bien plus tard, donc ce n'est pas ça non plus.

Je n'utilise pas de système de ping. Il n'y a que le flux RSS "basique" et le sitemap XML.

Effectivement ça fait plus d'un an que je constate moi aussi des indexations "rapides" (quelques minutes), mais là... avant même la mise en ligne, c'est assez sympa.

Il est vrai qu'à l'inverse, il désindexe très lentement, même s'il a déjà reçu du 404 et que l'URL sort du sitemap XML

[1-sponsor]

Bah ton sitemap est hyper trusté. De base, un wordpress brut de dézippage a déjà cet effet pour certains sites qui sont déjà bien installé. ;)

[Aaarrrgggh]

Hello,

de mon côté, je n'ai pas de sitemap, mais simplement des flux RSS et les indexations sur Google se font beaucoup plus rares... Google ne passe que toutes les 48h ou 72h. Beaucoup disent qu'un sitemap n'est pas forcément obligatoire, mais il n'empêche qu'il semble bien utile dans ces cas d'indexation quasi instantanée.

[1-sponsor]

Salut Argh
Tu valides combien de fois/jour ? Tu restes des journées entières sans valider ? Ton Flux RSS est linké en Home ?