L'attrape robots

est un site d'experimentations sur les tr�s nombreux moteurs qui parcourent le r�seau � la recherche de donn�es. Qu'ils soient execut�s sur de puissantes machines en cluster ou lan��s d'ordinateurs poussifs, programm�s pour une recherche bien pr�cise ou g�n�ralistes, respectueux des normes d'exclusions ou non, les robots de recherche, ou bots, ou crawlers, ou spiders, ont la chance de b�n�ficier de plusieurs facteurs qui font qu'ils ne sont pas vraiment �tudi�s de pr�s, ou en tous cas consid�r�s s�rieusement par la grande majorit� des webmasters. Parmi ces causes, on peut retenir :

L'attrape robots site experimental va s'efforcer d'analyser avec le plus de pr�cision et de m�thode possible la venue et le cheminement de ces programmes informatiques, afin de d�gager plusieurs groupes de bots, qui seront class�s selon plusieurs crit�res.

Plusieurs cheminements bien identifi�s seront propos�s aux robots, chacun pr�sentant des caract�ristiques particuli�res, comme la typologie de fichiers employ�e, l'arborescence d�ploy�e, le poids des diff�rentes pages, leurs encodages, l'analyse de leurs diff�rents types de liens hypertextes...

Menu pour attraper les robots

  1. Selection des meilleurs annuaires gratuits sur internet
  2. Nourriture pour agents utilisateurs
  3. Les agents utilisateurs d�vorent mon arborescence
  4. En parcourant les fichiers pour agents intelligents
  5. Pandaranol, un test en direct pendant un mois pour l'Attrape-Robots !

© 2014 L'attrape robots : Mentions l�gales : Contact