diff options
Diffstat (limited to 'files/fr/glossary/robots.txt/index.md')
| -rw-r--r-- | files/fr/glossary/robots.txt/index.md | 20 |
1 files changed, 20 insertions, 0 deletions
diff --git a/files/fr/glossary/robots.txt/index.md b/files/fr/glossary/robots.txt/index.md new file mode 100644 index 0000000000..07ffe84f0d --- /dev/null +++ b/files/fr/glossary/robots.txt/index.md @@ -0,0 +1,20 @@ +--- +title: Robots.txt +slug: Glossary/Robots.txt +tags: + - Glossaire + - Infrastructure +translation_of: Glossary/Robots.txt +original_slug: Glossaire/Robots.txt +--- +<p>Robots.txt est un fichier qui est habituellement placé à la racine d'un site web. Il détermine si les {{Glossary("crawler", "robots d'indexation")}} ont ou non l'autorisation d'accéder au site web.</p> + +<p>Par exemple, l'administrateur d'un site peut interdire aux robots d'indexation de parcourir un certain dossier (et tous les fichiers contenus à l'intérieur) ou de parcourir un fichier spécifique, généralement pour empêcher ces fichiers d'être indexés par d'autres moteurs de recherche.</p> + +<h2 id="Pour_approfondir">Pour approfondir</h2> + +<h3 id="Culture_générale">Culture générale</h3> + +<ul> + <li>{{Interwiki("wikipedia", "Protocole_d'exclusion_des_robots", "Robots.txt")}} sur Wikipédia</li> +</ul> |