Utilisation de robots.txt pour bloquer des sections spécifiques
Hello, j’ai une section /admin sur mon site que je veux bloquer des robots. Je peux juste ajouter une ligne dans robots.txt, ou il y a autre chose à faire ?
Utilisation de robots.txt pour bloquer des sections spécifiques
Budget de crawl, robots.txt, sitemap, indexation
person
Re: Utilisation de robots.txt pour bloquer des sections spécifiques
Oui, tu peux ajouter 'Disallow: /admin' dans ton robots.txt. Mais attention, ça ne bloque pas l’accès réel, juste les robots. Pour une vraie sécurité, il faut un mot de passe.
Re: Utilisation de robots.txt pour bloquer des sections spécifiques
D’accord, je vais faire ça. Mais est-ce que ça va affecter le référencement des autres pages ?
Re: Utilisation de robots.txt pour bloquer des sections spécifiques
Non, ça ne devrait pas. Le robots.txt ne bloque que ce que tu spécifies. Le reste du site reste accessible aux robots.
Le netlinking, un marathon pas un sprint
Re: Utilisation de robots.txt pour bloquer des sections spécifiques
Je confirme, mais garde un œil sur la Search Console pour vérifier que tout fonctionne comme prévu.
reply
Répondre
build expand_more
5 messages
Page 1 sur 1
arrow_back
Revenir à « Crawl & indexation »