Exclusion d'un robot
4 messages
• Page 1 sur 1
Consultez la formation URL Rewriting et sites dynamiques de WebRankInfo / Ranking Metrics
- zamal75
- WRInaute discret

- Messages: 137
- Inscription: 29 Déc 2006
Exclusion d'un robot
Bonjour,
Je viens de voir qu'un robot "pompait" pas mal de mes ressources..
Dans mes logs j'ai trouvé cette adresse :
http://www.cuill.com/twiceler/robot.html
Etant novice dans la matiere que dois-je faire ? L'exclure via le robot.txt ou bien par le .htaccess ? Et quel bout de code dois-je écrire ?
Merci de vos réponses.
Je viens de voir qu'un robot "pompait" pas mal de mes ressources..
Dans mes logs j'ai trouvé cette adresse :
http://www.cuill.com/twiceler/robot.html
Etant novice dans la matiere que dois-je faire ? L'exclure via le robot.txt ou bien par le .htaccess ? Et quel bout de code dois-je écrire ?
Merci de vos réponses.
-

mikaweb - WRInaute discret

- Messages: 208
- Inscription: 4 Juil 2007
Bonjour,
Voila j'ai un petit souci
Via mon fichier robots.txt je bloque certains paramètre de mon forum Invision.
Voila par exemple un paramètre de mon fichier texte.
Disallow: /index.php?act=Login
Et lorsque je vais dans mon google sitemap il me signalle pleins d'erreurs : URL restreintes par un fichier robots.txt (253)
Est ce que il signale simplement que certains URL ne sont pas accessible car bloquée ? Ou bien il y a un souci ?
Car quand je voie l'image d'avertissement je me dis que y a surement un truc qui pose souci quelque part
Merci
Voila j'ai un petit souci
Via mon fichier robots.txt je bloque certains paramètre de mon forum Invision.
Voila par exemple un paramètre de mon fichier texte.
Disallow: /index.php?act=Login
Et lorsque je vais dans mon google sitemap il me signalle pleins d'erreurs : URL restreintes par un fichier robots.txt (253)
Est ce que il signale simplement que certains URL ne sont pas accessible car bloquée ? Ou bien il y a un souci ?
Car quand je voie l'image d'avertissement je me dis que y a surement un truc qui pose souci quelque part
Merci
4 messages
• Page 1 sur 1
Formation recommandée sur ce thème :
Formation URL Rewriting et sites dynamiques : apprenez comment mettre en place la réécriture d'URL, comment optimiser vos URL et profiter de vos pages dynamiques pour booster votre référencement. Formation animée par Olivier Duffez et Fabien Facériès, experts en référencement naturel.
Tous les détails sur le site Ranking Metrics : programme, prix, dates et lieux, inscription en ligne.
Lectures recommandées sur ce thème :
- robot et exclusion sous-domaines
- exclusion index google
- Exclusion de l'index Google
- Exclusion illimitée de sites
- Exclusion de l'index de Google
- Exclusion de mots clés
- Problème exclusion programme adsense
- exclusion sur une requête
- Exclusion partielle de l'index de Google
- Exclusion dans une redirection
- Petit changement pour Slurp (le robot de Yahoo) - 29-03-2007
- Sortie officielle de GoogleStats v2.0 ! - 23-02-2003
- Sortie de GoogleStats v2.01 - 02-03-2003
- Etude de Googlebot, le robot d'indexation de Google - 30-07-2002
- Référencement : le problème des sessions des pages PHP - 04-08-2008
- Bingbot : le nom officiel du robot de Bing - 29-06-2010
- Etude de Googlebot, le robot crawler de Google (Fresh Bot, Deep Bot) - 05-09-2008
- Google Instant Preview : correction du bug Google Analytics - 01-12-2010
Consultez la description détaillée des produits ou services de Google suivants : Google Feed Fetcher, Googlebot
Qui est en ligne
Utilisateurs parcourant ce forum: Aucun utilisateur enregistré et 0 invités


