Fichier d'exclusion des robots

Gelose | Tous les portails | Portail Medecine | Portail Biologie | Portail Biochimie | Portail Microbiologie | Portail Ecologie | Portail Botanique | Biologie cellulaire | Portail Zoologie | Science de la terre | Portail Eau |

Inscrivez votre site en haut de cette page Soumission direct par Allopass, obtenez 1 lien de qualite en haut de cette page Fichier d--exclusion des robots ainsi que sur la page des nouveaux sites inscrits pour seulement 20 euros!

<table><tr><td><form name="APform" action="http://www.allopass.com/cb/check.php4" method="POST">
 <input type="hidden" name="CDOC_ID" value="341792">
 <input type="hidden" name="CSITE_ID" value="108673">
 <input type="hidden" name="LG_SCRIPT" value="fr">
 <table border="0" cellpadding="0" cellspacing="0" width="300">
  <tr>
   <td colspan="3">
         <img src="http://www.allopass.com/imgweb/script/fr/cb_os_top.gif" alt="">
       </td>
  </tr>
  <tr>
   <td width="157" valign="middle" bgcolor="White">
    <font face="Arial,Helvetica" color="Black" size="11" Style="font-size: 12px;">
     <b>Entrez votre ticket d'acc�s</b>
    </font>
   </td>
   <td width="80" bgcolor="White">
    <input type="text" size="10" maxlength="10" value="Ticket" name="CODE" onFocus="if (this.form.CODE.value=='Ticket') this.form.CODE.value=''" style="BACKGROUND-COLOR: #E7E7E7; BORDER-BOTTOM: #000080 1px solid; BORDER-LEFT: #000080 1px solid; BORDER-RIGHT: #000080 1px solid; BORDER-TOP: #000080 1px solid; COLOR: #000080; CURSOR: text; FONT-FAMILY: Arial; FONT-SIZE: 10pt; FONT-WEIGHT:bold; LETTER-SPACING: normal; WIDTH:85; TEXT-ALIGN=center;">
   </td>
   <td width="58" align="center" bgcolor="White">
    <input type="button" name="APsub" value="" onClick="this.form.submit(); this.form.APsub.disabled=true;" style="border:0px;margin:0px;padding:0px;width:48px; height:18px; background:url('http://www.allopass.com/img/bt_ok.png');">
   </td>
  </tr>
  <tr><td colspan="3"><img src="http://www.allopass.com/img/cb_bot.gif" alt=""></td></tr>
 </table>
<input type="hidden" name="DATAS" value="">
</form>			  	 
</td>
<td valign=	op"><table border="0" cellpadding="0" cellspacing="0">
 <tr>
  <td>
   <form name="cben" action="https://secure.allopass.com/cb/subscribe.php4" method="POST" target="DisplaySub">
    <input type="hidden" name="START" value="1">
    <input type="hidden" name="SDOC_ID" value="341792">
    <input type="hidden" name="SSITE_ID" value="108673">
    <input type="hidden" name="LANG" value="L_FR">
       <input type="image" src="http://www.allopass.com/imgweb/script/fr/cb_subscribe_os.gif" alt="Ticket d'acces" onClick="window.open('','DisplaySub','toolbar=0,location=0,directories=0,status=1,menubar=0,scrollbars=1,resizable=1,width=600,height=570');" border = 0>
      </form>
  </td>
 </tr>
</table></td></tr></table>

Le fichier d'exclusion des robots d'un site web est un fichier nommé robots.txt placé au plus haut niveau du site, et qui permet d'indiquer à certains ou à tous les moteurs de recherches ce qu'ils ne doivent pas indexer. Cependant, le fichier n'est pris en compte que par les robots, et n'a donc aucun effet sur les navigateurs web. Aussi, certains robots n'en tiennent pas compte et ne respectent pas le standard d'exclusion des robots.

[] Exemples

Autoriser tous les robots à accéder à tout le site:

User-agent: *
Disallow:

Empêcher tous les robots d'accéder au site:

User-agent: *
Disallow: /

Pour empêcher tous les robots sauf Googlebot d'accéder à un dossier en particulier, par exemple http://example.org/forum/

User-agent: *
Disallow: /forum

User-agent: googlebot
Disallow:

[] Voir aussi

Standard d'exclusion des robots
Robot d'indexation

[] Liens externes

(en) SearchEngineWorld.com, Tutoriel sur les fichiers robots.txt
(en) Robotstxt.org, Exclusion des robots
(en) Yellowpipe.com, Générateur en ligne de fichier robots.txt
(fr) Protocole d'exclusion des robots (annuaire-info.com) : la norme et les particularités propres à Google, Yahoo et MSN Search

Catégorie : Moteur de recherche