[Résolu] Fichier robots.txt et Free.fr (Créer un compte)

Accueil › Forums › WordPress › [Résolu] Fichier robots.txt et Free.fr
  • Statut : non résolu
12 sujets de 1 à 12 (sur un total de 12)
  • Auteur
    Messages
  • 12 novembre 2007 à 14 h 17 min #455204
    ShootDansLeBebe
    Membre
    Chevalier WordPress
    118 contributions

    Bonjour,

    Ma configuration WP actuelle
    – Version de WordPress : 2.3.1
    – Thème utilisé : Freshy
    – Plugins en place : pas mal ==’
    – Nom de l’hebergeur : free.fr
    – Adresse du site : http://sixmillionways.free.fr/

    Problème(s) rencontré(s) :

    Salut en fait je voudrais avoir des conseils concernant la mise en place du fichier robots.txt pour eviter l’indexation de certains partie du blog (comme la page d’amin entre autre) et éventuellement d’autres pages. Vous conseilleriez quoi ?

    12 novembre 2007 à 14 h 32 min #614006
    dlo
    Participant
    Maître WordPress
    1848 contributions

    Un petit tour sur cette page devrait répondre à pas mal de questions.

    Cordialement

    12 novembre 2007 à 14 h 34 min #614007
    secmast
    Membre
    Chevalier WordPress
    227 contributions

    3 secondes de recherche sur internet avec comme mots clef robot.txt et le troisième liens et celui-ci

    12 novembre 2007 à 14 h 36 min #614008
    secmast
    Membre
    Chevalier WordPress
    227 contributions
    dlo wrote:
    Un petit tour sur cette page devrait répondre à pas mal de questions.

    Cordialement

    même réaction 😉

    12 novembre 2007 à 15 h 04 min #614009
    ShootDansLeBebe
    Membre
    Chevalier WordPress
    118 contributions

    Merci à vous

    En fait j’avais déjà commencé à googleliser ^^. J’aurais juste voulu avoir des conseils ou savoir si il y avait des choses spécifiques à faire pour free.fr. Apparement non…

    Savoir aussi si sous wordpress il y avait des éléments en particuliers à ne « pas référencer »

    12 novembre 2007 à 15 h 34 min #614010
    benkenobi
    Participant
    Maître WordPress
    4068 contributions

    Fait une recherche sur le blog Here With Me d’AmO. Il y a consacré un article. 🙂

    12 novembre 2007 à 15 h 43 min #614011
    ShootDansLeBebe
    Membre
    Chevalier WordPress
    118 contributions

    MErci Ben

    En fait j’avais déjà été sur le blog d’AMaury, d’ailleurs le fichier robots.txt que j’ai utilisé pour aider au déréférencement de mon blog vient directement de chez lui 😳 . Je me suis basé sur son fichier pour essayer de comprendre un petit peu comment ça marchait…

    Reste plus qu’à potasser tout ça apparement ^^

    Donc si j’ai bien compris, à part les feeds, trackbaks, differents resultats de recherche et pages d’admin y’a rien d’autre à empêcher de référencer ?

    15 novembre 2007 à 10 h 57 min #614012
    ShootDansLeBebe
    Membre
    Chevalier WordPress
    118 contributions

    Bonjour à vous ^^

    Je voudrais vous demander un petit conseil à propos de mon fichier robots.txt, pour mon compte hébergé chez free… J’ai un format de permalien de la forme http://sixmillionways.free.fr/blog/index.php/année/mois/jour/nom de l’article/ donc je ne pouvais pas bloquer directement « /blog/index.php/ »

    Voilà donc mon fichier robots.txt, j’ai pas l’impression que quelque chose cloche (j’ai séparé les 3robots que je connaissais qui supportaient les paramètres * et $) des autres robots…

    Sitemap: http://sixmillionways.free.fr/sitemap.xml
        User-agent: Googlebot
        User-agent: Yahoo
        User-agent: msnbot
        Disallow: /blog/wp-                            #≠ référencement admin
        Disallow: /blog/index.php/contact/             #≠ référencement page de contact                                     
        Disallow: /blog/index.php/tag/                 #≠ référencement des tags
        Disallow: /blog/index.php/2005/*/$             #≠ référencement 2005
        Disallow: /blog/index.php/2006/*/$             #≠ référencement 2006
        Disallow: /blog/index.php/2007/*/$             #≠ référencement 2007
        Disallow: /blog/index.php/2008/*/$             #≠ référencement 2008
        Disallow: /blog/index.php/feed/                #≠ référencement feeds posts
        Disallow: /blog/index.php/comments/feed/       #≠ référencement feeds commentaires
        Disallow: /blog/index.php/*/*/*/*/trackback/$  #≠ référencement trackbacks

        User-agent: *
        Disallow: /blog/wp-                            #≠ référencement admin
        Disallow: /blog/index.php/contact/             #≠ référencement page de contact                                     
        Disallow: /blog/index.php/tag/                 #≠ référencement des tags
        Disallow: /blog/index.php/feed/                #≠ référencement feeds posts
        Disallow: /blog/index.php/comments/feed/       #≠ référencement feeds commentaires
        Disallow: /blog/index.php/*/*/*/*/trackback/   #≠ référencement trackbacks

    Ça a l’air d’être bon ? 😳

    20 novembre 2007 à 13 h 19 min #614013
    ShootDansLeBebe
    Membre
    Chevalier WordPress
    118 contributions

    Ptit remontage de sujet pour avoir vos avis…
    J’ai mis en place le fichier robots.txt . A priori je n’ai pas trouvé d’erreur dedans, mais je suis dans l’attente du passage du googlebot sur mon site…

    Vous pensez que mon fichier est bon ?

    20 novembre 2007 à 18 h 02 min #614014
    ShootDansLeBebe
    Membre
    Chevalier WordPress
    118 contributions

    Je n’avais pas vu que google proposait un outil pour vérifier les fichiers robots.txt, ou tout du moins je n’avais pas compris son fonctionnement (honte à moi ^^). Mais j’ai remédié à ça et voilà le fichier robots.txt finalisé et surtout fonctionnel :D . Testé avec l’outil selon mes besoins

    Au cas où ça pourrait en aider certains, je le poste

    Sitemap: http://sixmillionways.free.fr/sitemap.xml
        User-agent: Googlebot
        User-agent: Yahoo
        User-agent: msnbot
        Disallow: /blog/wp-
        Disallow: /blog/index.php/category/
        Disallow: /blog/index.php/tag/
        Disallow: /blog/index.php/a-propos/
        Disallow: /blog/index.php/contact/
        Disallow: /blog/index.php/2005/*/$
        Allow: /blog/index.php/2005/*/*/$
        Disallow: /blog/index.php/2006/*/$
        Allow: /blog/index.php/2006/*/*/$
        Disallow: /blog/index.php/2007/*/$
        Allow: /blog/index.php/2007/*/*/$
        Disallow: /blog/index.php/2008/*/$
        Allow: /blog/index.php/2008/*/*/$
        Disallow: /blog/index.php/feed/
        Disallow: /blog/index.php/comments/feed/
        Disallow: /blog/index.php/*/*/*/*/trackback/ 
        Disallow: /blog/index.php/*/*/*/*/feed/
        User-agent: *
        Disallow: /blog/wp-
        Disallow: /blog/index.php/category/
        Disallow: /blog/index.php/tag/
        Disallow: /blog/index.php/a-propos/
        Disallow: /blog/index.php/contact/
        Disallow: /blog/index.php/feed/
        Disallow: /blog/index.php/comments/feed/
        Disallow: /blog/index.php/*/*/*/*/trackback/ 
        Disallow: /blog/index.php/*/*/*/*/feed/

    Edit : c’est possible de mettre le post en résolu siouplé les modérateurs 😳 ?

    6 septembre 2008 à 19 h 45 min #614015
    Nevs
    Membre
    Initié WordPress
    39 contributions

    Bonsoir tout le monde
    Étant chez free pour ce qui est de mon blog, je me demande si ce fichier robots.txt fonctionne comme il faut pour référencer juste le nécéssaire et éviter le sliens superflus dans google ?

    24 septembre 2008 à 16 h 29 min #614016
    Nevs
    Membre
    Initié WordPress
    39 contributions

    Bonjour, excusez moi j’aurais une autre question : existe t’il un moyen que le robots.txt ne soit pas référencé ?

  • Auteur
    Messages
12 sujets de 1 à 12 (sur un total de 12)
  • Vous devez être connecté pour répondre à ce sujet.